yla 
5] 言 


数学 规划 是 最 优化 理论 的 一 个 分 支 ， PERCE ARID, Rn 
实 变量 1, …, Ca 的 一 个 单 值 目标 函数 了 进行 极 小 化 (或 极 大 化 )， 
这 些 变量 可 能 受 限制 于 有 限 个 写成 不 等 式 或 方程 的 约束 一般， 
我 们 定义 一 个 级 小 化 的 数学 规划 (Mathematical Program ) 为 


(MP) min f(e) (1.1) 
受 限制 于 
g(a)>0, i=l, =, m, (1.2) 
hi(@)=0, j=1, +, P, (1.3) 


其 中 % 是 分 量 为 ty, +, ws YE. 换 名 话说，(MP) 是 求 一 个 
TAA 1.2) ACE. IHRE aw", E P(e) BK A) ih, J e 
值 . WN es BEE CMP) +B AY oo BA TM eo EER He, 
我 们 称 之 为 非 线 性 规划 . 这 与 线性 规划 相反 , 那里 的 一 切 函 数 都 
必须 是 线性 的 ， 非 线性 规划 某 些 基本 方面 的 研究 是 本 书 的 主题 . 
非 线 性 规划 问题 , 出 现在 如 工程 经济、 商业 答 理 、 物 理科 学 和 
数学 这 样 一 些 不 同 的 学 科 中 ， 或 者 出 现在 具有 下 述 性 质 揭 其 他 领 
域 中 ， 那 里 需要 在 某 些 复杂 (或 相 冲 突 ) 的 情况 下 作出 (在 广义 下 
的 ) 决 策 , 而 这 些 情况 又 能 用 数学 模型 表示 . 为 了 说 明 某 些 类 型 的 
非 线性 规划 ,下面 介 绍 几 个 例子 . 
非 线 性 曲线 拟 合 
在 某 些 科学 研究 中 , 例如 在 生物 学 或 物理 学 中 ,假设 某 种 现象 
六 作为 时 间 的 函数 在 实验 室 中 被 测量 , 还 假设 这 现象 的 数学 模型 
已 经 给 定 , 并 且 根 据 模 型 知道 了 之 什 随 时 间 + 的 变化 为 
F(t) =a +2, xp(— ast). (1.4) 
实验 室 试 验 的 目的 是 根据 在 时 刻 tt, 2a, e, 2 测 得 的 了 之 值 来 求 
RBR 各 ,zs 和 ra， 这 一 决策 过 程 包含 要 指定 参数 值 , 十 是 自 
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RAER Ci, % 和 za 的 数值 在 某 种 意义 下 为 最 优 ， 例 如 , 我 们 可 
DE VN RAB PREM, RED, 求 那些 数值 ， 
使 实验 曲线 与 理论 曲线 的 偏差 的 平方 和 为 最 小 ， 形 式 上 ， 我 们 有 
非 线 性 规划 


min F (21, 2, %3) -$ LF Ct) — t — 2, exp( — ast!) ]?, 
(1.5) 
注意 到 这 是 一 个 无 约束 规划 , 解 出 的 参数 值 或 许 是 不 能 接受 的 . 为 
了 避免 这 一 情况 , 可 以 加 上 一 些 约束 形式 的 限制 . 例如 , 参数 za 限 
定 为 非 负 , 即 
ag>>0, (1.6) 
对 考察 的 特殊 现象 , 还 可 假设 所 提出 的 数学 模型 , 只 在 参数 选 
为 能 使 1=0 时 了 (0)=1, 才 是 可 以 接受 的 .因此 必须 加 上 约束 
21 十 Ye 一 二 (1.7) 
SCP iil FL. 6) AL. TTT RACE 5), 则 是 一 个 约束 非 线 性 规划 问 
题 , 具有 非 线 性 的 目标 函数 及 线性 的 不 等 式 和 等 式 约束 . 
定位 问题 
现在 假设 要 选 定 一 个 供应 中 心 的 位 置 ， 这 中 心 呵 城市 中 有 转 
定 空间 位 置 的 % 个 用 户 提 供 服 务 ， 中心 供应 的 商品 可 以 是 电 、 水 、 
牛奶 或 其 他 货物 .供应 中 心 的 定位 准则 是 使 从 中 心 到 用 户 的 某 个 
上 距离 遂 数 最 小 ， 例如 ,很 可 能 我 们 感 兴趣 的 是 使 中 心 到 任何 一 个 
用 户 的 最 大 距离 为 最 小 、 由 于 在 这 个 城市 里 货物 必须 沿 垂 直 的 路 
线 \ 如 街道 ) 供 应 ， 合 适 的 距离 函数 是 所 谓 矩 形 上 距离. 作为 数学 模 
型 列 出 来 , Beer, ta) FAN AE A EE CAR be), TO Ca’, Of) 
是 第 “个 用 户 的 给 定位 置 ， 我们 的 问题 则 是 
min { max [| a! — m| + |b — e)l}, (1.8) 


这 个 式 子 意味 着 , 首先 对 (wi， m) 的 每 个 可 能 值 必须 求 指标 i fE 

方 括 强 中 的 矩形 距离 最 大 , 其 次 在 依赖 于 (ex，2ze) 的 所 有 最 大 距离 

中 求 出 最 小 的 .另外 ,如 果 每 一 位 置 (z1， zs) 都 可 以 接受 ， 那 末 问 

题 是 无 约束 的 . 但是, 有 时 为 了 简化 某 些 表示 式 , 以 添加 额外 变量 
a 


和 约束 为 代价 是 有 利 的 ， 例 如 , 定义 一 个 新 变量 wo; 


Zo—max [| a‘—2| -+ |b'— zal] (1.9) 
或 
X= | a! — a | + |8'— wal, a=1, cer, My (1.10) 
我 们 就 得 到 一 个 有 三 个 变量 wo, t, aa 的 非 线性 规划 : 
min f(e) =a (1.41) 
受 限 制 于 
pilt) =%—'a'—a| — ib!— wa =O, 4=1, orem, 
(1.12) 


读者 容易 验证 , 问题 (1.8) 和 问题 (1.11) 至 (1.12) 在 以 下 意义 下 等 
Pi: (at, 2) 为 全 .8) 的 最 优 解 的 充 要 条 件 是 (2 xt, 2) 为 (1.11) 
MOIDA, ERRA kOm) RY 
w= |a" — ril +! bael. (1.13) 
读者 还 能 证 明 , 通过 引进 更 多 的 变量 ， 红 .8) 可 以 化 为 一 个 线性 规 
划 问 题 . 
过 程 设计 
在 连续 搅拌 的 模式 (回收 混合 物 ) 反 应 器 中 ,以 反应 物 4 的 水 
深 液 为 原料 ， 考 察 每 小 时 生产 一 定量 Fa 克 分 子 的 化 学 产品 加 的 
问题 .化 学 反应 为 
2A—>B, (1.14) 
且 符合 由 实验 建立 的 ， 以 反应 液 的 单位 体积 为 基准 的 经 验 速率 方 
Fe, 
-TA -8.4(Ca)?=8.4[0) (1- a4) (TAi ， (1.15) 
其 中 Cs 一 一 反应 器 中 4 的 浓度 ( 克 分 子 / 升 )， 
以 一 一 原料 中 A 的 浓度 ( 克 分 子 / 升 )， 
t 一 一 时 间 ( 小 时 )， 
24 一 一 转换 因子 , 反应 物 转化 为 产品 的 份 数 ， 
假设 4 的 浓度 在 某 一 连续 范围 内 时 ， 原 料 溶液 是 可 用 的 ， 并 
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且 单 位 价格 pa 由 下 列 关系 给 出 : 


pa=4(O4)** 《美元 [/ 升 )， (1.16) 
连续 搅拌 糟 式 反应 器 (CSTER) (ERE 
Pesrn =0.75(V °° 《美元 /小 时 )， (1.17) 


其 中 扩 升 ) 是 反应 器 的 容积 ， 假 定 产品 吾 的 售 价 为 1 美元 / 克 
分 子 , 我 们 的 问题 是 去 决定 : 原料 溶液 的 速率 及 ( 升 /小 时 )、 它 的 
HUE Cl. 反应 器 的 容积 六 和 转换 因子 ”4， 以 达到 最 优 操作 .也 
就 是 说 , 便 下 列 每 小 时 的 总 收益 为 最 大 : 

Pr=10F 5— pal — poer (Æ 元 /小 时 ). (1,18) 
SSE a HE Ia OP A A h 


rn FRO ru dc, 
HCL = FAC 2,)—(“Sa)y, (1.19) 
让 (1L.144) 得 到 
Smo amw) 
并 由 (I.15) 和 (1,19) 得 到 
8.408 (1—21)? V — FeO, (1.21) 
于 是 , 设计 问题 成 为 


max pr —BFYC Yas —4(O%)4F—0.75(V)9*, (1.22) 
受 限制 于 约束 (1.21)， 这 是 变量 0%, A, V, sa 的 非 线性 规 划 ， 
目标 对 数 和 约束 函数 都 是 非 线 性 的 . 注意 , 这 里 是 使 目标 函数 极 
大 化 . 


在 整个 这 本 书 中 ， 我 们 将 主要 关心 目标 函数 极 小 化 的 非 线性 
规划 . 这 并 不 算 任何 限制 ， 因 为 每 一 个 max 了 (zx) 型 的 问题 ， 通 过 
考察 min f(a), Hep f(a) = 一 f(z)， 总 可 以 等 价 地 进行 分 析 和 求 

最 后 , 对 以 后 各 章 所 用 的 记号 和 术语 说 几 句 。， 没 有 用 特别 的 
符号 来 表示 向 晤 向量 的 维 数 如 不 特别 说 明 , 总 可以 从 它 出 现 的 
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APPR. PAR RAE, SEA Pi 
HR, IR, 1, mo, …。 wn 是 % 维 向 量 z 的 分 量 . RA LRA 
来 区 分 不 同 的 向 量 , BORE, at, a, e, oo” BAR mP AMINE. 为 
了 避免 混淆 起 见 , 出 现实 数 的 指数 时 将 带 有 括 弧 , 就 是 说 (a)* 是 数 
a 的 平方 ， 记 号 oz 用 来 表示 ~- 个 行 向 量 ， 即 列 向 量 的 转 置 ， 实 
直线 ， 即 所 有 实数 的 集合 用 RKW, nX Ruclid 空间 记 为 R. 
WE cCR 也 常 认为 是 Bie, 居中 特定 的 点 常 以 它 的 坐 
标 米 表示 , 例如 = (一 1,， 2), IBS o> 0 表示 的 每 个 分 量 都 是 
非 负 的 . 这 样 ,如果 0EB", 邦 未 0 也 是 一 个 % 维 向 量 , 它 的 每 一 个 
分 量 为 零 . 记号 zz0 表示 2 至少 有 一 个 分 量 异 于 零 ， 

仅仅 用 到 具有 实 元 素 的 矩阵 ， 和 向 量 类 似 , 对 矩阵 也 没有 特 
别 的 符号 (虽然 一 般 用 大 写字 母 )， 矩 阵 的 维 数 从 它 出 现 的 式 子 中 
唯一 地 确定 ， 如 果 4 是 mxn 阵 (m 行 n 列 ), BBA 4 的 转 置 47 
Ain tims, BREA 的 道 阵 记 为 A, AAT AAI, 其 中 
I 是 恒 等 ( 单 位 ) 阵 . 

HR LER 的 模 定义 为 


Lari] = Ca) H (a2)? eee (0) PT, (1.28) 
我 们 常用 邻 域 的 概念 . 集合 
N (2°) = {e:m E RB", e—a || <8} (1.24) 


BRIT Re? I — AT CBR) SS EK, E S 是 一 正 数 ， 

Ses Re PAY AE As 57> a ea, AA eg SY 
模 ， 形 式 地 说 , 如 果 A Ep om xn 阵 , on HER, 那么 

Al supe: jaf #0} sup {loi hei =I}. (1.25) 

MB BIEN; 如 以 后 将 看 到 的 . 它们 有 时 可 取 值 十 co 或 
一 co. 在 儿 处 需要 较 深 数学 概念 的 地 方 , 或 是 在 书 中 定义 它 ; 或 是 在 
这 个 定义 要 求 更 多 的 背景 材料 时 , 我 们 就 放弃 完整 性 , 要 求 读 者 去 
参看 适当 的 文献 . 读者 如 对 初 筹 线性 代数 , 实 分 析 或 拓扑 不 熟悉 ， 
希望 去 查阅 这 些 方 而 的 入 门人 性 教科 蔬 ， 诸 如 Apostol™, Bartle”, 
Hall, Spencer’ 与 Noble™, . 
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第 I 部 分 分 W 


如 不 作 特 别 说 明 ， 求 解 一 个 非 线 性 规划 问题 的 涵义 是 求 一 个 
ARRIE, 而 不 是 求 可 能 存在 的 所 有 最 优 解 ,判定 一 个 最 优 
解 oo", 并 研究 它 的 性 质 , 构成 本 书 第 工 部 分 的 中 心 论题 , 它 处 理 非 
线性 规划 问题 的 菜 些 分 析 方 面 的 内 容 ， 我 们 将 会 看 到 ,如 果 向 最 
4 是 最 优 解 的 候选 者 ， 它 必需 满足 某 些 最 优 性 必要 条 件 ， 但 是 ,不 
幸 的 是 可 能 有 其 他 异 于 最 优 解 的 向 量 也 满足 这 些 条 件 ， RE, 必 
要 条 件 主要 是 在 否定 意义 下 使 用 的 : 如 果 向 量 z 不 满足 条 件 , 它 就 
不 是 最 优 解 ， 因 此 ,为 了 验证 最 优 性 , 我 们 希望 找 出 最 优 性 的 充分 
条 件 , 当 它 与 必要 条 件 一 起 被 满足 时 , 就 清楚 地 指明 了 所 考 赔 的 具 
KEHEKEHE. 这 两 种 类 型 的 最 优 性 条 件 是 要 稍 详 细 讨 论 的 第 
一 个 主题 . 特别 地 , 把 经 典 的 Lagrange 条子 法 扩充 到 具有 不 等 式 
约束 的 最 优化 问题 。 在 一 般 的 非 线性 规划 中 , 问 量 可 能 满足 一 类 
最 优 性 条 件 而 不 满足 另 一 类 ， 最 优 性 必要 条 件 也 是 充分 条 件 的 规 
划 是 很 重要 的 , 因为 这 时 在 所 考察 的 规划 中 , 表示 最 优 性 必要 条 件 
的 一 组 方程 或 不 等 式 的 解 , 必然 是 这 规划 所 求 的 最 优 解 . 

称 为 凸 规划 的 一 类 非 线性 规划 就 具有 上 述 这 样 好 的 性 质 ， 它 
们 以 某 种 结构 方式 含有 上 由 函数 和 四 函数 . 这 种 出 规划 特别 便于 分 
析 . 与 每 一 个 这 样 的 规划 相 联 系 , 存在 所 谓 对 偶 规 划 , 与 线性 规划 
类 似 , 它 具 有 某 些 有 趣 的 理论 性 质 ， 对 价 性 关系 将 借助 于 基于 共 
斩 函 数 的 近代 方式 进行 推导 . 

凸 规划 属于 每 个 局 部 极 小 都 是 整体 极 小 的 那 一 类 非 线性 规 
划 . 由 于 有 许多 非 凸 的 实际 问题 , 我 们 还 得 考虑 一 个 重要 问题 ,就 

多 


规划 ， 作 为 本 书 分 析 部 分 的 结尾 , 选择 了 一 些 非 线性 规划 , 对 它们 
阐明 某 些 理论 性 的 结果 ， 


TA 


经 典 最 优化 -一 一 无 约束 
和 等 式 约束 问题 


求实 函数 的 极 值 , 即 极 小 信 或 极 大 值 的 问题 , 在 数学 最 优化 中 
处 于 中 心地 位 . 我 位 从 最 简单 的 无 约束 问题 开始 这 个 极 值 课题 ， 
然后 进入 带 有 等 式 约束 的 极 小 和 极 大 的 论题 ， 这 里 讨论 经 典 的 
Lagrange 乘 子 理论 以 及 可 微 函数 极 值 的 某 些 必要 和 充分 条 件 . 这 
些 课题 的 处 理 可 以 回 滴 到 几 个 证 纪 以 前 , 所 以 有 “经 典 的 "称呼 .后 
面 几 章 将 讨论 有 不 等 式 约 束 的 最 优化 问题 ， 这 个 问题 得 到 的 所 有 
值得 注意 的 结果 可 以 算是 “近代 的 ”， 因 为 它们 是 近 二 三 十 年 来 对 
不 等 式 约 束 问题 的 强烈 兴趣 所 引出 的 结果 ， 所 有 “经 典 的 "结果 可 
以 看 成 更 一 般 的 “近代 "理论 的 特殊 情况 ， 我 们 先 介绍 经 典 的 结 
果 , 是 因为 它们 可 以 作为 桥梁 , 把 多 数 在 第 一 和 第 二 学 年 开设 的 大 
学 微 积分 或 实 分 析 课 程 的 内 容 ， 与 数学 规划 更 深 一 些 的 主题 连接 
HOOK. 此 外 , 经 典 理论 比 近代 理论 在 这 样 的 意义 下 更 简单 , 即 诸如 
关于 极 值 的 充 要 条 件 等 结果 ， 不 会 象 不 等 式 约束 情 形 那 样 被 更 复 
杂 的 要 求 弄 得 模糊 不 清 . 


2.1 无 约束 极 值 
PBE 中 区 域 哺 上 的 一 个 洋 值 函数 六 称 了 在 一 点 w*ED 有 
局 部 极 小 值 , 如 果 存 在 一 个 实数 5>0, 使 得 
f(a)>f æ) (2.1) 

对 适合 lz 一 和 <s 的 一 切 cE D 成 立 ， 则 样 可 定义 局 部 要 大 值 ， 
只 要 倒转 (2.1) 中 的 不 等 号 ， 如 果林 等 式 避 .二 换 为 严格 不 等 式 

fla)>fla’), ZED, wry’, (2.2) 
RPK f Eo” Be ea OME; 而 如 果 (2.2) 的 不 等 号 反 向 , 则 得 
到 严格 局 部 圾 大 值 。 如 果 仙 .14) (或 (2.2)) 对 一切 ZED Mir, BR 


g 


函数 在 w*ED 有 整体 极 小 值 (严格 整 体 极 小 值 ); 整体 极 大 信 ( 严 
阁 整 体 航 大 值 ) 可 类 似 定义 ， 一 个 极 值 是 指 极 大 值 或 极 小 值 ， 不 
是 每 个 实 郑 数 都 有 极 值 ， 例 如 一 个 非 零 线性 函数 在 珈 中 没有 极 
从， 从 定义 明显 得 出 ，f 在 DD 中 的 每 一 个 整体 极 小 ( 极 大 ) 值 也 是 
局 部 极 小 ( 极 天 ) 值 ， 其 道 一 般 是 错 的 , 读者 容易 用 例子 说 明 ， 但 
是 在 以 后 几 章 中 我 们 将 讨论 -一 些 函数 , Md eR, 它们 具有 值得 
注意 的 性质 ; 每 个 局 部 极 小 值 也 是 整体 极 小 值 , 
设 4EDCR" 是 一 点 ， 实 函数 了 在 这 点 可 微 ， 我 们 知道 若 一 
个 实 值 函数 了 在 内 点 ED 可 微 ， 则 在 w% 处 存在 一 阶 偏 导 数 ， 此 
外 ,车 偏 导数 在 % 连续 , 则 说 了 在 « 连续 可 微 ， 同 样 , 若 了 在 4ED 
二 次 可 微 , 则 在 那里 存在 二 阶 人 篇 导数 .车 它们 在 < 连续, 则 称 了 在 
Zz 二 次 连续 可 微 、 定 义 了 在 点 4 的 梯度 为 如 下 向 量 Vf (a): 
vf =( 2), ..., toy" (2.3) 


* OUa 
KA, E S Ea SURAT, EM F TE e hy Hesse BiRi FR axa 
对 称 阵 WF (w); 
vfa = [SL], i jot, yn, (2.4) 


Oa; 


本 节 我 们 讨论 无 约 东 函数 极 值 的 必要 和 充分 条 件 ， 我 们 从 叙 
述 以 下 著名 的 结果 开始 ， 
定理 2.1( 必 要 条 件 ) 
设 避 是 如 的 内 点 , 了 在 这 一 点 有 局 部 极 小 值 或 局 部 极 大 值 ， 
AS Ee 可 微 , 则 l 
Vi (a*) =0, (2.5) 
这 个 定理 将 作为 定理 2.3 的 一 部 分 , 重新 叙述 并 证 明 . 
HFEF De] Jey BB ABEL AY) FE) SRE 
定理 2.2( 充 分 条 件 ) 
设 必 是 如 的 内 点 ,在 这 点 了 二 次 连续 可 被 ,车 
Vi (a") =0, (2.6) 
以 及 
“vw 30D (2.7) 
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对 一 切 非 零 向 量 > 成立， 则 了 在 x* RRMA, 2.7) 的 不 
等 号 反 向 , WE” 有 局 部 极 大 值 . 并 及 这 些 极 值 是 严格 局 部 极 
值 . 
这 个 定理 可 以 用 了 的 Taylor 展开 式 来 证 明 , 留 给 读者 去 做 . 
在 这 两 个 定理 中 都 用 到 函数 在 极 值 点 2* EAS. 然而 , 如 果 
我 们 研究 函数 在 所 讨论 极 值 点 的 邻 域 中 的 性 态 ， 就 可 以 给 出 关于 
局 部 极 值 的 其 他 条 件 . 
定理 2.3 
Brè DHAR, BSED LAKH. ASK 
部 极 小 的 必要 条 件 是 : 
vf(2") =0, (2.8) 
并 对 一 切 z ARSE 
EPF (a* 20, (2.9) 
局 部 极 小 的 充分 条 件 是 (2.8) 成 立 ， 且 对 某 个 邻 域 Wi(o) 中 的 每 
个 MRE ce 有 
TYF (a)e=0, (2,10) 
如 果 (2.9) 和 (2.10) 中 不 等 号 反 向 , 定理 可 用 于 局 部 极 大 . 
【证 明 】 设 地 在 到 有 局 部 极 小 值 , MTSE TB No") CD 
中 的 一 切 x 成 立 
f(a) >f(a*). (2.11) 
我 们 能 把 每 个 zE Wo ) BH e= tby, Hep e 为 一 实数 ， 
y 是 向 量 , 其 模 yi =1， 因 此 对 充分 小 的 12| 成 立 


f(a" + Oy) ef (2"). (2,12) 
RY y, A FPO) =f aty) EAL F. Tze (2.12) 
F(0)>F(0), (2.13) 
它 对 满足 0< 的 一 切 4 成 立 . 
根据 中 值 定理 "有 
F(0)=F(0)+vF(), (2.14) 


其 中 是 D 和 工 之 间 的 一 个 数 . 
4 YE(0O)>D0 则 由 连续 性 假设 ,存在 一 个 s>0, 使 得 
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VFOP)>O | (2.15) 
.对 但 和 1 之 间 的 一 切入 和 适合 10| <e 的 一 切 6 成 立 ， 因 此 可 找 
到 一 个 8<0 适合 i6| <6, EL 


F(0)>F(0), (2.16) 
便 得 矛盾 . BRA VE) <0， 将 导致 同样 的 了 矛盾、 因此 
VEO) = Vf (a*) =0. (2,17) 
全 是 jy 是 任意 的 非 零 向 量 ,因此 有 
Uf (a") =0, (2.18) 


现在 转 到 二 阶 条 件 , 由 Taylor 定理 ， 
FO) =# (0) +VF(0)0-+-5 WFAA), ODL. 
(2.19) 
如 果 VIF (0) <0, 那么 由 连续 性 , 存在 o> 0 使 得 
VE (AG) <0 (2.20) 
对 0 和 1 之 间 的 一 切入 以 及 适合 101 < 人 的 一 切 6 成 立 . 
由 于 VP(0) =0, (2.20) 对 这 样 的 9 为 
F(@) <F(0), (2.21) 
从 而 发 生 矛盾 ， 因 而 
VFO) =y Vf (a* )y> 0. (2,22) 
让 于 这 不 等 式 对 于 只 是 模 受 到 限制 的 一 切 y 成立， 它 必然 对 于 一 
WAR z 也 成 立 ， 这 样 便 完 成 了 定理 第 一 部 分 的 证 明 、， 

为 证 第 二 部 分 ,假设 (2.8) 和 (2.10) 成 立 , 但 or 不 是 局 部 极 小 
什 点 ， 则 有 一 向 量 wE Naa") F(a") >S), Bwa" y, 而 
lvl 1 HO>0, #84 Taylor 定理 ， 

Flw) =f la") +O" vf a") + EOY (ot ROY iy, 
| (2.28) 
其 中 0<X<I1， 上 而 的 假设 导致 
Yves (a+ yy <0, (2.24) 
HF 2+ Nye No"), ERES (2 10) MEME. A RIC ED 
证 明 是 类 似 的 。 】 
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定理 2.2 基于 函数 在 点 HED, RRT SET EER 
部 极 值 的 充分 条 件 ， 我 们 将 说 明 , 容易 找到 不 满足 这 些 充分 条 件 
的 极 值 的 例子 ， 在 定理 2.3 中 我 们 有 基于 在 * 的 邻 域 中 的 性 
态 的 局 部 (不 一 定 为 严格 ) 极 值 的 充分 条 件 . 最 后 , 我 们 介绍 一 个 
也 是 基于 co" 的 邻 域 的 严格 局 部 极 值 的 充分 条 件 . 


定理 多 .和 
BrE DERA, 县 了 为 二 次 连续 可 微 , 若 
Vi (a*) =0, (2.25) 
FLAS 2” AY SB PFE fi] eto” 和 任何 非 零 的 z 成 立 
wt (ajz>0, (2.26) 


Wf Eo" 有 严格 局 部 极 小 值 ， 倒 转 (2.26) 中 的 不 等 号 ， 就 得 到 严 
格局 部 极 大 值 的 充分 条 件 . 

这 个 定理 的 证 明 类 似 于 前 一 定理 , 留 给 读者 作为 练习 . 

以 一 个 简单 的 例子 说 明 前 面 的 定理 . 

Pi) 2.1.2 

设 f(z) 一 《rz)2 KP p HERR, DARTRAR. BEVIS 
由 VS (@)—2p(a)* Ah, 在 % 一 0, 梯度 为 零 , 就 是 说 , 原点 满足 
定理 2.1 所 述 的 极 小 或 极 大 的 必要 条 性 ， 

Hesso  V7f 为 

Vf (2) =(2p—1) (2p) (£), (2.27) 
RM p=1, VFO) =2, BVI He eR NA Pa EE Cre 2. 2) 满 
E. 

BE, WRR pol, 那么 
Wf (0) =0, EM 2.2 的 充分 
条 件 不 满足 ， 然 而 可 以 从 图 上 
iif ERA BMA. 另 一 
方面 ， 取 原点 的 任意 邻 域 ， 读 图 .1 函数 在 原点 邻 域 中 的 图 形 
者 容易 验证 定理 2.3 局 部 极 小 (必要 的 和 充分 的 ) 条 件 全 满足 ， 并 
A, 由 定理 2.4 可 以 断定 极 小 值 点 w*=0 是 严格 极 小 .事实 上 , 原 
点 确 荐 了 的 严格 整体 极 小 值 点 . 


前 面 这 些 定 理 含有 二 阶 条 件 , eB 
PH (eJe= 3) $ hay odes (2.28) 
给 出 的 称 为 二 次 型 的 应 数 的 性 质 , 其 中 H = [al 是 实 对 称 阵 ， 为 
SHER RMAS, RAS hy, ORME 五 (c) 的 确定 性 ， 
我 们 计算 行列 式 dele) 
harle) eee Raple) 
d(e) =dot : 


2 


linale) «++ hy fe) 

EX k=l, o, n, RE dale) >, TRE H (e)z 就 对 一 切 
非 零 的 z 为 正 ， 从 而 HOEREER. BM k=l, e, m dlo A 
(—1)* FES, BA 必 (e) 的 从 交替 地 为 负 和 和正， 由 (2.28) 给 出 的 二 
次 型 对 一 切 非 零 的 2 为 负 ， 从 而 五 (ec) 是 负 定 的 . 如 果 我 们 对 上 
在 某 点 c 的 性 态 感 兴趣 ， 就 象 定理 3.2 的 充分 条 件 只 牵涉 到 和 矩阵 
Vf(e) 那 样 , 这 些 验算 是 有 用 的 ， 但 是 , 如 果 象 定理 2.3 那样 ， 要 
在 “的 一 个 邻 域 中 确定 二 次 型 的 符号 , 这 些 验算 就 行 不 通 了 . 


2.2 ”等 式 约 束 极 值 和 工 agrange 方法 


在 上 节 我 们 讨论 了 没有 其 他 附加 条 件 时 ， 通 数 在 其 定义 域内 
部 存在 极 值 的 必要 和 充分 条 件 ， 这 一 节 我 们 讨论 的 极 值 问题 ,其 
目标 是 求实 值 函 数 在 含 于 函数 定义 城 的 一 个 特定 范围 内 的 极 小 值 
BRA, 而 这 容许 范围 是 由 有 限 个 称 为 约束 的 方程 来 描述 的 ， 
AB RRL. DOR 为 定义 域 的 实 值 肖 数 了 的 极 小 (或 极 大 ) 值 
问题 , SAH AR A 
g(a)~0, i=, Mm (m<n), (2.30) 
其 中 每 个 g: EED LE MASABR. ARAETA FE E 
个 数 这 一 假定 将 简化 下 面 的 讨论 ， 所 以 问题 是 在 由 (2.30) 中 方程 
确定 的 范围 内 求 了 的 极 值 ， 求解 这 种 问题 的 第 一 个 和 最 直观 的 方 
法 包含 这 样 的 步骤 ， 即 利用 (2.30) 中 的 方程 消去 mr 个 变量 ， 消去 
的 条 件 将 在 后 面 的 隐 函 数 定理 中 叙述 ， 而 证 明 可 在 大 多 数 高 等 微 


k=1, =, n, (2.29) 
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积分 教 本 中 找到 (如 参看 [1,， 8). KAEA BE A A g 可 微 和 
nx m Jacobi 阵 [6gs/ 62] 的 秩 为 mm， 约 束 方程 中 mm 个 变量 关于 其 
余 % 一 m 个 变量 的 实际 求解 , 虽然 不 是 不 可 能 的 , 却 常常 表明 是 困 
难 的 工作 ， 为 了 这 个 缘故 ,并且 显然 这 个 方法 把 等 式 约 束 问题 归 
约 为 一 个 等 价 的 在 前 节 讨 论 过 的 无 约 东 问题 ， 我 们 就 不 进一步 继 
续 下 去 了 了 ， 

另 -一 种 方法 由 Lagrange 提出 ， 也 是 基于 把 一 个 约束 问题 变 
为 一 个 无 约束 问题 的 想法 ， 数学 规划 的 许多 近代 结果 , 实际 上 是 
Lagrange 方法 的 一 种 直接 扩充 和 推广 ， 主 要 是 针对 不 等 式 约束 
HY. 

RUER SNR SS, 然后 介绍 一 个 结果 , 沿 着 这 结 
果 所 提供 的 方向 , 可 以 把 等 式 约束 问题 化 为 等 价 的 无 约束 问题 . 

定理 2.5( 隐 范 数 定理 ) 

设 办 是 定义 在 妈 上 的 实 值 函数 ， 在 一 开 集 D CDCR? 上 
HM, Hh p> FHR i=l, +, mR, PCD My. 
pla, y°)=0, 假定 Jacobi Elada, y) 2al kam, BA 
ETB No, MCD, 一 个 舍 态 的 开 集 DC R? 和 在 D 
上 连续 可 微 的 实 值 函数 由,% 一 1，…', m, 使 得 下 列 条 件 满足 . 

alt= ply), k=l, =, m (2.81) 
对 每 个 yE D 4 
pily), y)=0, t=1, =, m, (2.32) 
Herp ply) = (nly), s Pm); 且 对 一 切 (a, y) EN, Y°), 
Jacobi FELAd,(2, y) /Ox, 的 秩 为 m, Wb, X yE D*, daly) iia 
导数 是 下 列 线性 方程 组 的 解 


Ey Abby), y) PY) n ba), D jat -m 
2 Da, ay; Oy; 3 3 2 . 
(2.83) 


在 引进 Lagrange 方法 之 前 , 先 提出 下 述 结果 . 

定理 2.6 

BFA g=, …， m4) 是 DCR" 上 的 实 值 函数 , 且 在 一 邻 域 
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No )CD LÆRT M. Meet N.(2") be E 

gile)=0, G=1, «+, m (2.34) 
的 一 切 点 % 来 说 , 是 了 的 一 个 局 部 被 小 或 极 大 值 点 ， 又 假设 
ao) RY Jecohi 隆 的 秩 为 m， 在 这 些 假设 下 , JE o RH E Eg 
在 wr 的 梯度 的 线性 组 合 ,就 是 说 存在 实数 AY 使 得 


via) ÈN vga), (2.35) 


DERI 经 过 对 行 的 适当 重新 排列 和 编号 ， 总 可 以 假定 由 
Jacobi RE [eg.(2*) /eas] HI AY FT PY REY m xX m 阵 是 非 蜡 的 . 线性 
方程 组 

| > anl) } = a oe, j=t, 
对 和 有 唯一 解 , 记 为 和. B= (ami 2)， 对 于 (2.34) 在 人 
应 用 定理 2.5, 于 是 存在 实 范 数 HUONE d 的 开 集 Dcr”, 使 
得 


“e, m (2.36) 


ahs), j=l, = m (2.87) 
以 及 
F(a") =f Aa (2), t, half”), Emi es en), (2.38) 
作为 上 面 式 子 的 一 个 结果 ,由 定理 2.1t 可知 ，f ET En 
tr 的 偏 导 数 在 wr 必 为 零 , 这 样 ， 
OL) S Ala) Bh A) | FO) 0 
Ox; $ 


da, i Oy eh, 
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g=mt+1, =, n, 
(2.39) 
从 \2.33) 对 每 个 了 一 各 十 1，…， 9 有 
a) Dha) _ O agla) ; 
$ Ag Pui (S2), 4 一 二 =, m, (2.40) 
A Fe (2.40) 4 — 4 Fy AE SEA I, 得 到 
3 $ ar 2 og") ) hy) +30 


1 人 ay Oa; i 


zs 2012) = =0, j=m+l, =, n, 


(2.41) 
M (2.39) tds (2.44) JE, 就 有 
36 


wf OF(@") Si ye Oga") | ahli") 4 CRE) Sage Oe). 
Èl Oty ah bay Ase) | On; 02; -$a FEP 

=0, j=m+l, =, n, (2.42) 
{B H (2.36), TA PK Fe, PL 


af (a Pe dgl) =0, j=m-+1, 


Ox; ii Ow ” 
最 后 的 表达 式 与 (3.36) 一 起 得 到 要 证 的 结果 J 
在 局 部 极 值 点 ， 求 极 小 或 极 大 的 通 数 的 梯度 与 约束 函数 的 梯 
BE 2 fal, 存在 上 面 定 理 所 表 示 的 关系 , E Lagrange A Liw, A) 
的 下 述 表 达 式 : 


n, (2,43) 


L(%, 1)— f(a) -Ù ngle), (2.44) 
其 中 4 称 为 Lagrange F, 
Iagrango 方 法 包含 有 将 一 个 等 式 约束 极 值 问题 化 为 求 
Lagrange 式 的 逗留 点 问题 ， 这 可 志 以 下 定理 看 出 . 
定理 2.7 
BES, go $ 一 1，…, m 满足 定理 2.6 的 假设 , 则 存在 一 个 乘 子 
RAG, AN), 使 
Vir, »*)=0, (2.45) 
[证 明 】 从 定理 2.6 和 (2.44) 给 出 的 工 的 定义 直接 推出 。 J 
在 文献 中 有 上 面 两 个 定理 的 一 些 不 同 证 明 , 例如 [2, 6,7]， R 
们 选择 大 于 隐 函 数 定理 的 证 明 , 这 是 因为 它 不 需要 其 他 背景 材料 . 
前 已 指出 ,本 节 的 定理 可 以 看 成 某 些 近代 更 一 般 结果 的 特殊 情况 ， 
下 一 章 我 们 也 将 介绍 它们 , 并 将 给 出 沿 不 同 路 线 的 证 明 . 
定理 2.7 提供 了 有 等 式 约 末 的 了 的 极 信 的 必要 条 件 ， 和 前 一 
节 一 样 ， 现 在 转 到 讨论 这 种 极 值 的 充分 条 件 ， 记 号 VICE, n) JB 
来 表示 办 关于 的 j 次 导数 ( 当 j=1 RARER), 于 是 有 下 述 
定理 . 
定理 2.8 
设 day) gm 是 Br 上 二 次 连续 可 微 的 实 值 函 数 ， 若 存在 
RR CR AL ATE RY, 使 得 


yy 


VL a*) =0, (2.46) 
并 且 , 对 每 个 非 零 向 量 z€ BR", 内 要 满足 
ZVg(2")=0, i=l, =, m, (2.47) 
便 有 
viL(y, »")z>0, (2.48) 
则 在 限制 g(2) 一 0 i=l, =, m F, fE oY 有 严格 局 部 极 小 值 . 
若 (2.48) 的 不 等 式 反 向 , 则 了 在 a 有 严格 局 部 极 大 值 . 
CHER) 假定 a 不 是 严格 局 部 极 小 值 点 ， 则 必 存 在 一 个 令 
域 入 (2") 和 一 个 收敛 于 局 的 序列 E), tE ENa"), Heo", E 
MEDEA 
g(2) =0, i=l, --, m, (2.49) 
f(a") EF"). (2.50) 
Ze mat + Oy}, 其 中 D0 Rhyl, E, AF 
PURE (0, y), 而 四 一 1， 根 据 中 值 定理 中 ,对 这 子 序列 的 每 个 
k, 我 们 有 
(2) ~ gel") = 7 g(a" ROY) =0, isi, +, m, 
(2.51) 
p of 2 0 mi AA, E 
FESTOS Ey, (2.52) 
其 中 人 也 是 0 和 工 之 间 的 一 个 数 . 
LAO (2.51) #1(2.52), 并 令 boo, 得 到 
(J) Vga") =0, dl, =, m (2.53) 
(9) Vf (e") <0, (2.54) 
从 Taylor 定理 有 
LC, M)=L(a", M)+0*(y*)"VeL(a", 入) 
+5 (Oy) VEL (at + oy, a)y", (2.55) 
Sp 1>7*>0, 
根据 (2.44), (2.46), (2.49) (2.50) 349 + (6*)*BR(2.05), 
得 到 
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Cy") VEL HO, Ay" <0, (2.56) 
4 81~>ce， 从 上 式 得 到 
(y) Vela", A*)y <0, (2.57) 
HAF y +O HE (2.47), 这 就 完成 了 证 明 . J 
上 一 定理 中 铬 述 的 充分 条 件 ， 涉 及 到 在 线性 约束 下 决定 一 个 
二 次 型 的 符号 ， 这 一 工作 可 以 由 Mann™ 的 一 个 结果 来 完成 . 设 
A= [an-A nxn 实 对 称 阵 , H. B= Eul A nxm ERF, 以 Mog 
记 出 阵 召 仅 仪 保留 前 Pp 行 和 前 9 列 的 元 素 所 得 到 的 矩阵 . 


定理 2.9 
假设 det! Bam] #0, 那么 二 次 型 
> > ot (2.58) 
对 一 切 适合 
Bié=0, A (2.59) 
Hy IES a € AGE, 当 且 仅 当 
1) "det As Bom >0 2.60 


H p=m+], =, nn 成立 ， 类 似 地 ， (2.58) 对 -一 切 适 合 (2.59) 的 非 
零 向 量 6 为 负 , 当 且 仅 当 
(-Draet| 加 >o (2.61) 
MM pem+1, =, nY. 
这 个 定理 的 证 明 可 以 在 [31 或 16] 中 找到 . 
(Riz nx m AY Jacobi 阵 Fogd(o 7ao] 的 秩 为 m, HERH 
号 使 得 


gale") ,, Ogmt’) 
O25 On, 
det : : #0, (2.62) 
agla") Bgm") 
Dan Otm 


PARTENE. 

推论 2.16 

设 六 p te: Oma EO RESTA LA, WRAAE E 
SER, MER" 使 得 


vitae", 4°) =0, (2,63) 
并 且 邵 果 
PL, R) PLC. A") Aale) Oem la") 
OP10:51 Ot OL, Ow1 On, 
人 人， 和 人) Lg, A) dga") , lmi x") 
Bcl ° eyes Br Ow, 
(—1)"det l 0 
Bo) g(a") 0 oe 0 
Cay OX, 
Pyn la") gml") 
| ĉn Oat, 2 0 
(2.64) 
RE pam-bL, =, AIRY, WA fE a" 有 严格 局 部 极 小 信 , 使 得 
g(a*)=0, i=l, ,mh (2.65) 


【证 明 】 从 定理 2.8 和 定理 2.9 直接 得 到 ， ] 

AY a eK YS SS SR, 在 (2.64) 中 改 ( 一 4)” 为 
(一 4)? 便 得 ， 

Hl 2.2.1 

考察 问题 


max f (21, Z3) = vm, (2.66) 
受 限 制 于 约束 
9(%1, Lo) 一 4 十 za 一 2 一 0. (2.67) 
首先 作 Lagrange xt 
Liw, A) =aita—A(tat+2——-2), (2,68) 


其 次 到 VLG", A") =0, 
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Bh", K) at -0, (2.69) 


Oe 
ôl ko, A`) =a —}* = 0, (2.70) 
OMe 
a LONE er ee ey (2.71) 
ELBE PEE it l 
wimoy =A =l, (2.72) 


因此 点 (2, A= (1, 1, 1) 满足 定理 2.7 中 所 述 的 极 大 值 点 的 必 
要 条 件 . 

根据 定理 2.6, 在 最 优点 Vf 和 V9 必定 线性 相关 , 这 明显 地 
从 图 2.2 和 看 出 ,在 那 点 Vf(2") 实 际 上 等 于 Vgl"). 


x 


P i *)= ọgíix*) 


1 
2 
fix)=1 
vz 
l 2 3 x g 
图 2.2 PRIJA 
转向 充分 条 件 ， 计算 vi L(a, A): 
BL, 2") 0 PL, Aar) _ Pia, A) AY) -0 
wdw ; OLIOT ms BosB 


(2.73) 
所 以 


0 
PIREA 2.8, WA XIE evga") 一 0 的 一 切 > 关 0， 决 定 项 数 
2zlgs 的 符号 Fa 


vaL iz", j= (21, to) i : 12 J- Best, (2.74) 
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由 于 


agla), Br) -1 (2.75) 
On, OTa g 
上 面 的 条 件 等 价 于 各 十 2 一 0， 代入 (2.74), 得 到 
AVELE", Ms= —2{2)2<0, (2.76) 


RIEC, 1) 是 严格 局 部 极 大 值 点 . 
最 后 , 可 以 检验 推论 2.,10 给 出 的 充分 条 件 ， 这 时 2= 2 H. 

ro 14 

one 1 0 1 
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=2>0, (2.77) 


+ 


因而 验证 了 前 面 的 推论 。 1 


已 对 更 一 般 的 约束 极 值 问题 导出 了 类 似 于 定理 2.3 的 二 阶 必 


要 条 件 “， 在 等 式 约束 的 情形 , 这 些 条 件 儿 乎 是 无 约束 问题 的 
二 阶 必要 和 充分 条 件 的 直接 推广 ， 

在 定理 2.6 中 我 们 假定 了 Jacobi 阵 [2g.(w*)/8w] 的 秩 为 
m( <<n), 它 等 于 约束 方程 的 个 数 。 在 结束 这 一 章 时 , 我们 叙述 定 
理 2.6 的 一 点 推广 , EAF Jacobi 阵 的 铁 数 不 要 求 条 件 . 

定理 2.11 

BEF 和 gs, 5 一 1,…, m, ERIR DER 上 连续 可 微 的 实 值 函 
数 ， 若 对 2* 的 一 个 邻 域内 满足 

WD et (2.78) 
的 一 切 点 « 米 说 , a 是 的 局 部 极 小 或 级 大 什 和 点 , 则 存在 m+1 
个 不 全 为 零 的 实数 总 M, o, Aa 使 得 

SUF a") — D1 Rv gia") =0. (2.79) 

FREAR E EIA I E R LAT RE BA — PRI Bi 
果 , 这 个 定理 可 看 作 它 的 一 个 推论 。 从 这 些 结果 我 们 可 以 得 出 以 
下 绪论: 若 如 是 一 个 局 部 极 值 点 , 则 mx Cont) 增 广 Jacobi Be 
[af a") ðn, Aga") AaB NF (m+1). Hh, TEM, 车 


以 上 和 矩阵 的 秩 等 于 Jacobi 阵 [2g (2")/075] 的 秩 ， 则 6 天 0, 并 可 


规范 化 为 六 1、 但 是 ， 若 增 广 Jacobi 阵 的 秩 太 于 Jacobi 阵 
a l 


YlLoe 


[eqi(a*) 3r] 的 秩 ， 则 AG 必定 为 零 . Lin Ret TRASH PON 
时 , 可 以 发 生 这 个 情况 . 
Hj 2.2.2 
min f(a) =2 (2.80) 
受 限制 于 
g(s) = (a)? =0, (2.81) 
能 行 集 只 包含 一 点 434=0. FER A Lb, Jacobi 阵 [dgs/da] K Ek A% 
零 , 而 增 广 Jacobi E [df/de, dgi/dz] WRAL 2.794 
MA.0=0, (2:82) 
即 Ag =O, 


练 习 


2.A. 证 明定 理 2.2. 
2. 了 .对 下 面 的 函数 , 求 出 满足 极 什 必 要 条 件 的 点 : 


T: 
1)" Sey ETE Gis) 
试 通过 检验 充分 条 件 确定 这 些 点 的 性 质 ， 
2.0， 研 究 Br 的 原点 是 否 为 函数 
Cw) = am, 70 + (a9) 70% + (ra) e (2.84) 
的 极 信和 点 ,其 中 为 参数 . 
2.D， 对 于 下 面 的 油 数 ,在 满足 极 值 必要 条 件 的 一 切 点 中 , 求 极 小 值 点 : 
S=. | (2.85) 
2. 卫 .证 明定 理 2.4， 
2. 了 .给 定 了 线性 方程 组 
Az=b, (3.86) 
RhA emyn KER, b RHA, CR RAE, BE m<n 
RARER m, pate AO. Io, RAR A 和 


b 表示 的 o 的 显 式 解答 ， 说 明 z*== (41, -9, -1)" 确实 是 
steers (2.87) 
一 2xs 一 43 (2.88) 
狗 这 样 一 个 解 , een: RYJA R 
2.G. i Ryo) ERA, DS Heth (2.38) %— AEM, 举 一 
个 数值 例子 来 说 明 这 事实 . 


a3 


2.8. SRA PREZ, 0) 到 曲线 


6. 


7. 
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dr; — (22)2—0 ; (2.89) 
POMS IES. (ay 直接 消去 一 个 变量 ，(b)Lagrange 方法 ， 这 两 种 情况 
是 否 得 到 相同 的 解 . 


参考 文献 


BARTLE, R. G, The Elements of Real Analysis, 2nd ed., John Wiley & Sons, 
New York, 1976. 

BELTRAMI, E. J., “A Constructive Proof of the Kuhn-Tucker Multiplier Rule,” 
J. Math, Anal. & Appl., 26, 297-306 (1967). 

Desreu, G., “Definite and Semidefinite Quadratic Forms,” Econometrica, 20, 
295-300 (1952), 

Fiacco, A. Y., “Second Order Sufficient Conditions for Weak and Strict Con- 
strained Minima,” SIAM J. Appl. Marth., 16, 105-108 (1968), 


Mann, H. B., “Quadratic Forms with Linear Constraints,” Amer. Math. 
Monthly, 50, 430-433 (1943), 


McCormick, G. P., “Second Order Conditions for Constrained Minima,” 
SIAM J. Appl. Math., 15, 641-652 (1967). 


Puires, C. G., “Maxima and Minima Under Restraint," Amer. Math. Monthly, 
59, 230-235 (1952). 


Runin, W., Principles of Mathematical Analysis, 2nd ed., McGraw-Hill Book 
Co., New York, 1964, 


第 了 党 


约束 极 值 的 最 优 性 条 件 


上 一 章 处 再 的 问题 局 限于 无 约束 或 等 式 纷 束 问题 ， 木 章 我 们 
开始 讨论 含有 不 等 式 和 等 式 约 束 的 数学 规划 问题 。 注意 ,把 不 等 
式 引 入 最 优化 问题 ， 标 志 着 最 优化 “经 典 ” 时 代 的 结束 和 数学 规划 
“现代 ”理论 的 开始 .不等式 约束 很 少 是 严格 的 不 等 式 , 而 可 以 作 
为 等 式 或 严格 不 等 式 被 满足 ， 不 等 式 的 这 个 特点 使 最 优 性 条 件 的 
分 析 处 理 复杂 化 , 但 足以 补偿 这 一 点 的 是 , 利用 不 等 式 约束 能 够 表 
达 极 为 丰富 的 一 类 问题 . 

最 优 性 条 忻 问 题 的 某 些 处 理 可 以 在 文献 中 找到 ， 每 种 处 理 的 
特点 是 由 施加 于 所 含 函 数 的 假定 来 刻 划 前 .在 这 些 处 理 的 大 部 分 
中 , 所 叙述 的 最 优 竹 条 人 忻 以 这 种 或 那 种 方式 与 Lagrange 式 的 概念 
AX. 如 果 目 标 函 数 和 约束 函数 是 可 微 的 (或 二 次 连续 可 微 )， 那 
4, Lagrange 式 既 能 较 方便 地 处 理 ,又 不 损失 许多 一 般 性 ,本章 通 
篇 使 用 这 一 假定 。 放 松 可 微 性 假定 , 往往 导致 另 一 种 最 优 性 条 件 ， 
它们 最 好 表示 为 另 一 些 问题 的 最 优 性 条 件 , 例如 求 Lagrange 式 的 
鞍点 , 或 求解 所 谓 对 侦 规 划 . 


3.1 不 等 式 约束 极 值 的 一 阶 必要 条 件 


我 们 来 叙述 本 章 所 讨论 的 最 一 般 的 数学 规划 人 疝 题 ， 着 手 导 出 
不 等 式 与 等 式 约束 航 值 问题 的 一 阶 必要 条 件 ， 其 中 仅 和 包含 一 阶 导 
Z. PRE: 


(P) min f(s) (3.1) 
受 限制 十 约束 : 
g(a) =D, 4=1, srr, MM, (8.2) 
h;a) =0, j=l, sees P. (3.3) 


假定 函数 万 Ya, “n Jm a o ho ERIR DOR H EAHA 
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tH. 以 下 CD 表示 问题 (P) 的 能 行 集 , 即 满足 (3.2) 与 (3.8) 的 所 
有 EE 如 的 集合 ,能 行 集中 的 点 称 为 能 行 点 。 MM, UNO) 
示 点 wm? 的 半径 6 的 球形 邻 域 . 

AoeX 称 为 问题 (P) 的 局 部 极 小 值 点 或 (P) 的 局 部 解 ， 如 
果 存 在 正 数 8 使 

f(2)>f (2") | (8.4) 
对 所 有 ce XN NG(a*) Rae. 如果 (3.4) 对 所 有 ee X 成 立 , 则 ot 
称 为 问题 (P) 的 整体 极 小 值 点 (整体 解 ) . 

每 个 在 罗 SBOP I o WAR Wo" +2, 这 里 , 4AM Yo 
ON ?为 非 零 向 量 ， 向 量 z 关 0 称 为 w* 的 能 行 方向 向 量 ， 如 果 
FE S>, 使 (a"+- 62) € XN. (2") 对 于 所 有 的 0s0<Sa/lz| 
成 立 ( 见 图 3.1). 


图 3.4 能 行 方向 向 量 


能 行 方向 向 量 在 许多 数值 最 优化 算法 中 是 重要 的 ， 当 前 我 们 
对 它 感 兴趣 , 简单 的 理由 是 , 如 果 o* 是 问题 (P) 的 局 部 解 ,z 是 能 
行 方向 向 量 ， 那 么 对 于 充分 小 的 正 数 9, DA ftofl), 
让 我 们 用 约束 函数 % 与 hh 刻 划 能 行 方向 向 量 的 特征 . 
定义 
Ia) = fi: gle") =O}, (3.5) 
BRM PRE RET (a) 与 人 * 点 的 一 个 能 行 方向 向 量 z， 成 立 
eV ges") 0。， 按 照 可 微 性 假设 , 我 们 有 
Gul 2" + Oz) = gala") + 62" Tg (a*) +62,(8), (3.6) 
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其 中 en(0) 4 0-0 时 趋 于 零 , 如 果 6 足够 小 , 风 Tgl) 十 6s(0) 

<0, HER X gs(2*) =0, 我 们 得 到 ge +-6z) <0 WE BTA IED 

小 的 8 二 -0 成 立 , 从 而 与 + 是 的 能 行 方向 向 量 这 个 事实 相 矛 盾 . 

RE, PR ICI (a), DMA lva ATE, H F 

能 行 方向 向 量 , AAR j=l, … pA PVA (o")—0. 现在 定义 
F(a") = {ex Vga 0, 1C I (a"); 

a vhj(a")=0, j=1, =, p}. (3.7) 
通过 前 面 的 讨论 可 见 , 如 果 z 是 z* 的 能 行 方向 向 量 , MEZ ae). 
一 个 集 ECR 称 为 锥 ， 如 果 对 于 每 一 个 非 负 数 a, cCK 蕴涵 
ace K, RZ BREE. Eth X eo" REY 
HOON, HACETE RELAKRR AMER. ERNES 
一 “线性 化 ”集合 22(z*) 以 备 以 后 需要 . 

Zi (æ) = {sf ) <0}, (3.8) 
如 果 *E Za(s)， 可 以 证 明 存 在 足够 接近 于 a” A eseo, fh 
i fla") >f le), 

由 Minkowski, Farkas" 得 到 并 以 后 者 命名 的 下 述 引 理 ， 是 
接 下 去 所 需要 的 ， 这 个 引 理 的 证 明 在 下 一 章 给 出 . 

引 理 8.1(Farkas 引 理 ) 

设 4 是 给 定 的 mxn KER, 5 是 给 定 的 % 维 向 重 ， 对 所 有 
满足 Ay>O 的 向 量 y 成 立 不 等 式 ne 其 充 要 条 件 是 存在 m 维 
向 量 p> 0 使 dp 一 六 

图 3.2 说 明了 对 于 3x2 REA 的 Farkas 引 理 ， fy Ay, Ao, 
A 是 矩阵 4 的 行 向 量 ， 考 虑 由 与 4 的 每 个 行 向 量 成 锐角 的 所 有 
向 量 y AREY.” Farkas 引 理 指出 , 5 与 每 个 yEY 成 锐角 的 
充 要 条 件 是 5 能 表示 成 4 的 行 向 量 的 非 负 线性 组 合 ， 在 图 3.2 
中 , bt 是 满足 这 些 条 件 的 向 量 , 而 o 却 不 是 . 

如 在 前 面 一 章 那样 ， 我 们 现在 定义 关于 问题 (P) 的 Lagrange 
x 

Lle, 和 u) =f) -È nala) -È why), (8.9) 
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图 3.2 XF 3x2 toh A A Parkas 引 理 的 解释 


并 可 证 明 下 列 定 理 . 

定理 383.2 

HEX, M ZNZ 一 的 充 要 条 件 为 ， 在 在 向 量 
?和 wr, 使 得 . 


VLC, A, pP) = Vf) È Vga) — Bi uvh Ca") =0, 


(3.10) 
Atg (a®)=0, $l, =, m, (3.11) 
Mo 0. . (3.12) 


【证 明 】 集 好 (oo) 是 非 空 的 ， 因 为 原点 总 是 属于 它 ;， Za) 
(1 Ge) 为 空 集 的 充 要 条 件 是 : 对 满足 


2Vgi(zo)>>0， tC I(x), (3.13) 
woh a)=0, j=l, =, p (3.14) 
的 每 一 个 2 我 们 有 
2 Of (a) 0. (3.15) 
我 们 可 将 (3.14) 写 成 两 个 不 等 式 
20h(e)>0, j=1, =, P, (3.16) 
ZL —Vhj(a°)]>0, j=l, p. (8.17) 


由 引 理 3.1 WT AI, (3.15) RH (3.13), (3.16), (3.17) BTA W 
E: 成 立 的 充 要 条 件 是 : FEE ASO, pt O 和 jw 之 0, 使 得 
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Tf la) DN vg) +S! uiua), (3.18) 
FIEIS), D=O, =u, RIKE Bo) 22") 
为 空 集 的 充 要 条 件 是 (3.10) 至 (3.12) 成 立 ， 了 

我 们 希望 扩充 定理 2.6 中 给 出 的 关于 等 式 约束 问题 之 解 的 必 
要 条 件 ,对 此 ,条件 (3.10)~(3.12) 当 然 是 自然 的 候选 者 ， 它 们 确 
实 成 为 一 般 数学 规划 问题 (P) 的 最 优 性 的 必要 条 件 ， 如 果 我 们 能 
保证 在 (P) 的 局 部 解 e 处 集 21(2*) niL2a(o”) 为 空 集 . 

有 兴趣 的 读者 可 以 尝试 在 这 点 配 上 具有 等 式 与 不 等 式 约 东 的 
简单 的 数学 规划 ,得 到 它们 的 解 ， 并 对 这 些 解 点 , 构造 集 Zaz) 与 
ZA (a), 对 于 大 部 分 间 题 , 他 将 发 现在 问题 的 解 点 处 Z1(4) (er) 
确实 是 空 的， 因此 Lagrange 式 条 件 (3.10) 至 (3.12) 在 那些 点 成 
立 ， 然 而 并 不 总 是 这 种 情形 , 这 从 下 述 取 自 [25] 的 例子 可 见 . 

例 8.1.1 ; 

考虑 到 中 的 约束 ( 见 图 3.8) 


gile) = (1—21) — wa, (3.19) 
gale) =27>0, (3.20) 
gals) = 2220, (3.21) 


图 3.3 水 具有 Lagrange RTF MHRSRILAM AT 
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E= (I, 0 是 能 行 的 , 容易 验证 


Z (aP) = {(a1, 24) +22 =O}, (3.22) 
A re)= 一 由， 可 以 看 到 加 2G 
min — s, (3.28) 
受 限制 于 约束 (3.19)~{3.,21) 的 解 ， 在 2, 
Z?(a°) = { (21, za) :A>0}, (3.24) 


E ZN Z9(a JARS, WAR INF PEE (B.10)~(B.12) Hy a? J 

在 关于 问题 (P) 的 Lagrango mak se {Sl dt A be om Be BY 
DRET, 可 能 导出 关于 最 优 性 的 弱 的 必要 条 件 , 而 不 要 求 在 解 处 
集 bz) 站 Ga(o) 成 为 空 集 ， 令 弱 Lagrange XL eH 


Ela, 和 1) =2ef(@)— Sy dag) -2 uhila). (3.2) 


Fritz John 在 他 的 1948 FATA tE TE 4 (22) h, WE 
Lagrange 式 ， 仅 假定 所 包含 的 函数 有 连续 的 一 次 候 导 数 ， 就 氢 述 
并 证 明了 不 等 式 约束 数学 规划 (没有 等 式 约束 ) 的 必要 条 件 , Jonh 
的 条 件 后 来 为 Mangasarian 与 Fromovi 刀 扩充 到 有 等 式 与 相等 
式 约 束 的 问题 ， 即 如 本 节 开 头 所 述 的 问题 {(P)， 我 们 即将 搬 述 这 
些 条 件 , 对 仅 有 不 等 式 约 束 的 稍 简单 的 情况 给 出 证 明 .。 对 不 等 式 
及 等 式 情况 的 完整 证 明 本 以 在 [27] 中 找到 ， 首 先 我 们 需要 下 面 称 
为 “ 择 一 定理 ”的 结果 . 


定理 8.3 
设 4 是 mxn 实 矩阵 , 则 或 者 存在 % 维 向 量 %, 使 
Az<0, (3.26) 
RR AEE m EE Se, 使 
WÀ =0, ux, (3.27) 


但 二 者 不 能 同时 成 立 . 
【证 明 】 假设 存在 = 与 使 (3.26) 和 (3.27) 同 时 洲 足 ， 则 我 
们 同时 有 az4z<0 Re Ac=0, 得 出 矛盾 。， 现 在 如 果 不 存在 4 满 
足 (3.26)， 这 意味 着 我 们 我 不 到 一 个 负数 轧 HRI Pee RH 
足 
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Aae=Dayej<w, i=l, =, m, (3.28) 
j=l 


令 y= (w, s)", b= (1, 0, eet, 0) Gi, A~ [eg, —A], 其 中 6 
=(1, ++, 1)?E A”, 借助 前 述 Farkas 引 理 , RAB Em He 
ta usO, 使 


Sunt, (3.29) 
2 tu 9, j=l, sre, A (3.30) 


FUG u 是 (3.27) 的 解 . 1 

关于 另 一 些 择 一 定理 ， 读 者 可 参考 Mangasarien™ MAR 
叙述 在 上 面 定 义 的 弱 Lagrange 式 基础 上 的 必要 条 件 . 然而 在 证 
明 中 , 我 们 假设 问题 中 不 出 现 等 式 约束 为 (2%)=0。 于 是 下 面 的 定 
理 便 回 到 Fritz John 最 初 的 那 一 个 定理 2 

定理 3.4 

MIR S, 1, os Gm; 有 e, ty 在 包含 互 的 开 集 上 连续 可 微 ， 
车 是 问题 {) 的 解 ， 则 存在 向 量 各 一 O06, A, A” Bp 
= (wi e up) 使 得 


m f 
Veli(a", A, p") = VF (2") — p> A Vg”) go LyChy(a°) =0, 


(3.31) 
Ma(a")=0, i=l, +--+, mM, (3.32) 
(At, wo") 0, 2°20, (3.33) 
【证 明 】 对 王 列 问题 : 
min f(s) (3.34) 
受 限 制 于 

gla)>0, i=l, =, m, (3.85) 

我 们 考虑 它 的 解 2* BRA. RRA I", 使 得 
rows a") 一 > AG Vga") =0, (3.36) 
Agla) =0, t=1, =, m, (3.37) 
a0, 和 0. (3.38) 
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HDT A è RE gle") > 0, W Te") = 8, 选取 
=l, Ap Age An =O, 
(3.36) Z (8.38) Vf (a") =0 一 起 成 立 ， 
现在 设 Te ) AY, 则 对 满足 
Zvgla")>0, EI") (3.39) 
的 每 个 z 我 们 不 能 有 
PVF (a) <0. (3.40) 
这 结果 是 从 上 面 看 到 的 事实 推出 的 , 即 若 存在 2 满足 (3.39), 则 能 
找到 充分 小 的 6 使 对 于 任何 0<6<5, xz 一 2* 十 如 满足 


i g(a) >0, i=1, ---, m; (3.41) 
即 * 是 能 行 的 . (3.40) tH ARS, 则 
f(e) < f(a"), (3.42) 


与 4 BR/MER AIR. BOE, RRA 39) 5 (8.40) AA, H 
定理 3.3, 存在 一 非 零 向 量 NO, 使 得 


MVE (a") + pak MCU—Vgil2")] 一 0. - (8.43) 
对 bE I(x"), SM =0, 经 过 整理 我 们 从 (3.48) 得 到 
ov F(a") -$y N Vgs(2") =0, (3.44) 
并 且 显 然 
No(a*)=0, ¢=1, +, m, (3.45) 
了 


如 果 总 是 正 的 ， 定 理 3.4 的 条 件 (3.31) 至 (3.33) 变 成 定理 
3.2 的 条 件 (3.10) 至 (3.12)， 反 之 ， 定 理 3.2 的 条 件 自然 蕴涵 定 
理 3.4 当 避 -1 时 的 那些 条 件 . 

例 3.1.2 

再 次 考虑 例 3.1.1 所 讨论 的 极 小 化 问题 ， 令 总 =0, ai=, 
3-0, 以 及 总 1 我 们 注意 到 在 2*==(1, 0), Fritz John 的 必要 
条 件 是 满足 的 ， 1 

这 个 例子 出 说 明了 定理 3.4 的 主要 弱点 : 事实 上 , IAN, 
eH; (8.81) B (3.33) 71, 0) 对 任何 可 微 的 目标 遂 数 了 都 满足 ， 
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不 管 它 在 这 点 是 否 有 局 部 极 信 . 

读者 可 能 感到 奇怪 ， 既 然 我 们 基本 的 数学 规划 问题 容易 转换 
成 只 包含 等 式 或 不 等 式 约束 的 等 价 问题 ， 为 什么 它 要 同时 具有 等 
式 与 不 等 式 约 束 ， 假 定 在 问题 中 有 不 等 式 g(z) 之 0。 令 g 是 附加 
变量 , 我 们 可 以 写 出 等 价 的 等 式 


g(a) — (y)?=0, (3.46) 

相反, 如果 我 们 有 等 式 约束 4(s) =0, ERERARASA Ce. 
h(2)>0, (8.47) 
h(s) <0, (3.48) 


这 样 ， 以 增加 变量 个 数 或 约束 个 数 为 代价 ， 等 式 -不 等 式 类 型 问 
题 能 转换 成 只 含 单一 类 型 约束 的 等 价 问 题 . 正如 Mangasarian、 
Eromovitz “关于 Fritz John 条 件 所 指出 的 那样 ， 这 种 转换 在 某 
EAEAN, 但 也 可 能 使 某 些 结果 大 大 减弱 ， 
假设 我 们 将 问题 (P) 的 每 个 等 式 约束 写成 
hy(@)=gmss(@) 20, j=l, =, p, (3.49) 
— Ayla) = gme l E) 20, j=l, -…, P. (3.50) 
从 而 将 问题 (了 ) 转 换 成 (3.34)、(3.35) 的 形式 ， 选取 
和 一 ae 一 入 m 一 0， hm+1 = et neg = Amt pe A Antap™ 1, 
我 们 发 现 , 事实 上 条 件 (3.36) 至 (3.38) 对 于 每 个 能 行 点 满足 , 而 不 
必 是 最 优点 . 
在 4951 Æ, Kuhn 与 Tuoker 在 他 们 的 基本 著作 后 中 给 出 了 
不 等 式 约 束 的 数学 规划 的 必要 条 件 , Ee John 的 条 件 更 强 ， 用 一 
个 称 为 约束 品 性 的 正则 性 条 件 限 制约 东 函 数 ， 它 们 能 保证 导 子 Xe 
确 是 正 的 ， 这样, John 的 必要 条 件 的 扩充 形式 便 成 为 等 价 于 条 件 
(3.10) 至 (3.12) 的 形式 ， 对 约束 函数 施加 限制 ， 以 保证 在 数学 规 
划 的 解 处 Lagrange 乘 子 的 存在 ， 这 种 限制 的 类 型 已 经 成 为 努力 
深入 研究 的 主题 . 除了 Kuhn-Tucker 原来 的 约束 品 性 之 外 已 提 
出 了 另 一 些 正则 性 条 件 . 我 们 在 这 里 提 到 的 著作 有 人 Abadiem， 
Arrow , Hurwiez, Uzawa™, Beltrami’, Canom Cullum, Polak", 
Evans’, Gould, Tolle“? , Guignard*’, Karlin, Mangasarian, 
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Fromovitz@", Slater, Varaiya®”, 在 下 面 的 讨论 中 我 们 一 般 
遵循 Abadie, Gould 与 Tolle 以 及 Varaiya 的 著作 。 对 于 各 种 约 
RAE Bit, BSB 见 Bazaraa, Goode, Shetty 和 Gould, 
Tolle H A AER, | 

实际 上 我 们 应 把 这 些 正 则 性 条 件 称 为 “一 阶 "约束 品 性 ， 以 区 
蜀 于 我 们 将 在 下 一 节 提 到 的 与 二 酚 必 要 条 件 相 联系 的 其 他 一 些 约 
束 品 性 。 然而 在 不 发 生 混淆 时 ， 我 们 就 简单 地 把 它们 称 为 约束 品 
性 . 


我 们 通过 引进 非 空 集 ACR 在 点 zE AMMEN MR, RIF 
始 讨论 约束 品 性 用 SA, 2 表示 包含 集 {asa EA) 的 所 有 闭 
锥 的 效 , WIR A 在 点 © AEE SCA, 2) EL 


S(A, e) = 7) SCAN Ni ae), 2), (3.51) 


H Nine) e 的 半径 为 蕊 /的 球形 邻 域 , ARB. 下 述 引 
HART SCA, 2) 的 特征 ， 
引 理 3.5 
向 量 z 包含 在 SCA, sw) 的 充 要 条 件 是 ， 存 在 一 列 收敛 于 % 的 
la] Eis CA, 并 存在 一 列 非 负 数 {oc 中}, BEAR BI {aK (c*§—o) ATF 
Z, 
DEMIT BEE SCA, s), WARA k=l, 2, …, AESA 
N Nial), 2), REM, 
SCAN Nin(@), ©) -cl{a(y—ax) :a>0, yEANNipn(a)}, 
k=1, 2, ---, (3.52) 
这 里 ol 表示 Br 中 集合 的 闭 包 算 子 ， 选取 任 一 正 数列 {fs 对 使 其 收 
ATO 并 考虑 向 量 2(se) E {aty 一 2) a0, yE AN Nin(x)} 使 
zle”) —z} <e, (3.53) 
则 由 (3.52), ENTS 
a(e*)eala*)(y(s*)—@), ole)>0, yl) EANN ale). 
(3.54) 
$ k=l, 2,，…， 我 们 产生 一 列 包 会 于 4 BAK F e h i 
sé 


yle), y(e7), e, AR — FEHB Pale’), ale), ，…， 使 得 由 
(3.53) R (38.54), ÆA {a(e*)(y(s*)—-z FAT RZ, BR 
BFE — FE RF eA E {o*} CA A — FFE A ah, He 
{o*(c*—a)}\KAF 2, +p EARR, WHE-BREK, 使 
4 kK RH EANN), 或 : 
(a — e) E(AN Nine), «), eK, (3.55) 
Hy S 是 闭 的 , 有 
z€S(AN Mi, (*), 2). . (3.56) 


图 3.4 任意 集 4 与 它 的 切 锥 
因为 最 后 表达 式 对 任意 自然 数 Pp 成立, HERI 
z€ S(ANNasg(a), z) =8(4, 2), (3.57) 


| ] 
借助 上 述 引 理 , 可 能 给 出 非 空 集 A 在 «点 处 切 锥 SCA, z) 的 


另 一 种 描述 首先 注意 到 向 量 色 =0 对 每 一 和 4 及 s% 均 在 SC(4, s) 

内 . 令 刀 是 一 单位 向 量 , 即 lw 上 |~=i， 设 存在 一 个 收 化 于 zz 的 点 列 
{之 4, aaa, A 

1 

ks Nw" 


我 们 可 以 说 向 量 序列 {2 辣 在 ww 方向 收敛 于 zw, TRA E oO 
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ee: (3.58) 


切 锥 ， 包 含 上 面 得 到 的 ww 的 非 负 倍 数 的 所 有 向 量 ， 因此 由 
we S(A, 4+) 推出 存在 一 列 {2 中 己 4， 在 吕方 向 收 伍 子 %， 察 看 切 
锥 的 另 一 种 方式 是 这 样 的: 通过 把 4 的 每 一 元 素 减 去 2 以 平移 集 
A, 令 {o 他 是 平移 后 集合 中 的 序列 , +0, 收敛 于 原点 ， 构 造 通过 
原点 和 他 的 射线 序列 , 这 些 射 线 趋向 于 一 条 属于 SCA, 2) 的 射线 ， 
取 所 有 这 样 的 序列 形成 的 所 有 射线 ， 其 全 体 将 是 4 在 “的 切 锥 . 
这 种 构造 如 图 3.5 及 下 面 例子 所 示 . 


例 8.1.8 
i | 
B={(a, 2a): (a,—4)*-+ (ta—2) <1), (3.59) 
BD BB 是 中 心 在 (4, 2) 半 径 为 1 的 闭 球 ， 让 我 们 来 找 B 在 边界 点 ， 
比方 说 2= (4 一 M3 /2,，372) 的 切 锥 .首先 递 过 把 每 一 点 减 去 2 
来 平移 B, 得 到 球 


B-f (a, ta) : (21 VEY + (m4) < 十 (3.60) 


在 B 的 边界 上 下 一列 收敛 于 原点 的 序列 {2w*}， 我 们 产生 一 列 射 
R, 收 伍 于 一 直线 ， 它 实际 上 就 是 由 B 的 边界 定义 的 曲线 在 原点 
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Ab AY EOE BR, 这 直线 满足 
Batt m=O, (3.62) 


对 于 在 Bi 的 内 部 而 收敛 于 原点 的 所 有 序列 重复 上 述 过 程 ， 我 们 
得 到 召 在 @ 的 切 锥 为 


S(B, 2) ={(m, m): Smt+tacol (8.62) 


这 是 一 个 容易 的 练习 , 去 说 明 在 这 情况 下 8(B，2) 与 
g(a, %) = — (%—4)79— (41 — 2)? +120 (3.63) 
HE v= (4 一 M3/2, 3/2) 的 线性 化 锥 相符 . 1 
我 们 接着 将 用 到 集 ACR 的 正法 锥 的 概念 , 它 由 所 有 满足 
eyed, 对 于 所 有 YEA (3.64) 
的 向 最 zE Re 组 成 , 记 作 4'， 我 们 用 正法 锥 的 省 称 以 区 别 于 “ 负 ” 
法 锥 或 极 锥 ， 它 是 用 (3.64) 中 不 等 号 反 向 来 定义 的 .下 面 用 到 的 
法 锥 的 一 个 重要 性 质 是 ; 给 定 两 个 集合 ACR 和 Ace, w 
ACA, BYR ALC A}. (3.65) 
Pe SERS URBAN BARONE. BAN 
用 下 述 引 理 开始 把 它们 联系 起 来 . 


图 3.6 正法 # 
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5| 323.6 
设 2 下， MHARA 
VfL) E (Zy (3.66) 
BY, 集 Hat) 站 2Z2(29) 为 空 集 . 
GEA] #£7@) 122) ASR, 当 且 仅 当 对 每 个 ? 
EA GAZ UF(2) 20, FEVIMAZEAS@ 的 正法 锥 
A. J 
引 理 8.7 
设 2 是 问题 (P) 的 解 , 则 
wf (a) € (SCX, 2))'. (3.87) 
【证 明 】 RIVARA, HEES, A), A AVF (x) 
20, ze S(X, 2°), MAZA 3.5, PEM 2° 的 一 序列 
{4} E X PARMA {0}, Eaa WMT 2, BASE 
4 可 微 ,我 们 可 写 出 | 
F) =f (2°) + mo) Uf (a") + el oa, (8.68) 
其 中 上 4 koc MP MAF SHR. 因此 
a [F (a) — f(a") = (a (w — 2°) Vf a) + eja (a*a) |, 
(3.69) 
因为 XEK, 2° 是 局 部 极 小 值 点 ， 令 k>, MF ela*(2*—2?) | 
一 0, 且 表 示 式 [S (a)-f RAPIER RR. AE 
lim (a*(a*—@°)) vf) =z v0, (3.70) 
E yfe") € (SCX, 2°))' 1 
现在 我 们 可 以 叙述 并 证 明 本 节 的 主要 结果 , 它 荐 比 定 理 3.4 
中 给 出 的 要 更 强 的 一 组 必要 条 件 . 下 面 叙 述 的 条 件 可 看 作 Kuhn- 
Tucker 最 优 性 必要 条 件 的 直接 扩充 . 
定理 8.8( 广 义 有 Kuhn-Tucker 必要 条件 ) 
令 a 是 问题 (了) 的 解 , 并 设 
(Zey = (SCX, a)y, (3.71) 
WFE A= CAT, vee, An)? E em (ui, oom, a)”, 使 得 
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vile") Suva) -F uivh(a")=0, (8.72) 
Aigla) =0, =l, =, m, (8.78) 
M20, (3.74) 
MER] Bo" 是 问题 (P) 的 解 ,由 引 理 3.7, Vf (2*)E SCX, 
a*))', E) = (SCX, a)y, W VAa E (Za). Bai 
3.6, 集 如 (wz") 站 23(w') 是 空 的 再 由 定理 3,2, 条 件 (3.72) 至 
(3.74) Rar. J 
注意 , 在 问题 (P) 的 解 a" 处 , FA 
Zi (a") =8(X, x") (3.75) 
蕴涵 上 述 定理 的 假设 . Gould、Tolle""， 对 一 个 比 我 们 这 里 略 为 
一 般 的 问题 曾 用 (8.71) 作 为 约束 品 性 .在 他 们 的 著作 中 ,附加 限 
Ace DRT Mme E, RPDBRR WERE. eH 的 
情形 中 , TR I 是 卫 与 满足 (3.2) 与 (3.8) 的 «的 集合 的 交集 . 
他 们 证 明了 ，(3.71) 不 仅 是 存在 习 子 入 、 yw 使 (3.72) 至 (8.74) 成 
立 的 充分 条 件 ， 而 且 在 一 定 意义 上 是 必要 的 . 三 重组 (g, h, D) 称 
HE a 是 Lagrange 正则 的 , 当 旧 仅 当 对 每 个 在 e 有 局 部 约束 极 
小 值 的 可 微 目 标 函 数 户 FREER A", yo" 满足 (8.72) 至 (3.74), 后 
来 在 [1 中 证 明了 ，(g, h, D) FE a* Æ Lagrange 正则 的 ， 当 且 仅 
当 条 件 (3.71) 成 立 .。 实质 上 ， 我 们 在 定理 8.8 中 已 经 证 明了 ， 
(3.71) 确实 是 存在 满足 (3.72) 至 (3.74) HRPA u 的 充分 条 
件 . 为 了 证 明 这 条 件 也 是 必要 的 , Gould 与 Tolle 证 明了 对 每 个 
ye (S(T, 2'))"， 存 在 具有 局 部 约束 极 小 值 的 可 微 函 数 f， 使 
Vf(2") 一 y, h Lagrange 正则 性 与 引 理 3.6, RIBA yE (ay. 


因此 | 
(SCX, #))'C(Z*(a"))', (3.76) 
要 求 读 者 证 明 , 对 每 个 能 行 点 公有 
(Z AN E, 4), (8.77) 
因此 等 式 满足 . 
例 3.1.4 


考虑 下 列 非 线性 规划 问题 ， 
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min f (2) =a, (3.78) 

受 限 制 于 
gila) = 16 — (a1—4)?— (29)? 0, (3.79) 
hy (a) = (a —8)7+ (sa —2)?—13=0, (3,80) 


: 


r xy 
能 行 集 } 


人 
SS oer 


图 3.7 例 3.1.4 的 能 行 集 和 满足 Kuhn-Tucker 条 件 的 点 
可 以 从 图 3.7 中 看 到 f(a) E= (0, 0) 5 a? = (6.4, 3.2) 有 局 
部 极 小 值 , 在 这 两 点 ,， Te) =I (a) = {1}. 在 第 一 点 ， 
Zi (at) =f (a, n)a, m= -号 (8.81) 


H+ Aix Bethe SCY, 2), RATA RHR. We 
Z? (a) = { (a, 22) 1210}, (3.82) 

因此 Z (at) 230") =O. 对 N= fA ut=0, Kuhn-Tuoker 条 
(8.72) E (3.7) WE. 在 第 二 点 ， 

Zoo :aa>0 tnd, 6.83) 

Zaa) = { (21, 22) 12% <0}, (3.84) 
HAM 242) 1272") = 有 读者 可 验证 , 在 第 二 个 局 部 极 小 
值 点 所 需 的 乘 子 是 
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。 8 . 1 
M= 5 和 Mp. 
其 实 还 有 另外 的 成 立 Kuhn-Tuoker 必要 条 件 的 能 行 点 ， 令 
2"3 一 (3 十 ~M13, 2), 读者 能 证 明 ZNZ =， 且 相 应 的 
REL N= 0 MAYE, MEAST, RA 不 是 我 们 问题 的 
解 ,而 正好 是 下 列 问题 : 
max f(z) =a (3.85) 
FEA (3.79) B (8.80) 下 的 解 。 】 
到 现在 为 止 , 关于 问题 (P) 中 所 包含 的 函数 的 类 型 ,除了 可 微 
性 ， 没 有 作 特 殊 的 假定 ， 关 于 这 些 函 数 的 进一步 假定 将 导致 
Kuhn-Tucker 条 件 的 特殊 形式 . 我 们 仅 给 出 一 种 特殊 情况 .在 
很 多 应 用 中 , 出 现在 规划 中 的 变量 o 要 求 是 非 负 的 ， 假 设 在 约束 
(人 .2) 和 (人 .3) 之 外 我 们 还 要 求 
: v= 0, | (8.86) 
对 这 种 情形 的 必要 条 件 可 以 叙述 如 下 ; 
定理 3.9 
令 党 是 问题 (P) 在 附加 约束 (3.86) 下 的 解 , 设 (3.75) 成 立 , 则 
FENE 
r= (Al, very Am) 和 p= (444, sae Ms), 
使 
vi (at) — SN vale") -$ utviy(a*)0, (3.87) 


Argile") =0, iml, e, m, Av SO, (3.88) 


(at)" [UF 0) -ÈN vgl) -yva |=. (8.89 

2h EB AVE RA EE, LENTE X hE 

(3.2), (8.8) A(B.86) ABFA o ALM. 对 于 求 了 的 极 大 值 而 不 是 

BAP) 中 那样 求 极 小 值 的 问题 ， 或 者 某 些 约束 形 为 gm(z)<0 AS 

题 ， 容 易 借助 于 考虑 在 原 米 函数 前 添加 抽 号 ， 以 得 到 解 的 必要 条 
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fF, MERRER- ORMA, EAB SR h 
FAR ~ g(x) 之 0. 

对 于 一 般 非 线性 规划 问题 ， 必 要 且 充 分 的 约 东 品 性 (3.71) 的 
验证 是 一 件 儿 乎 不 可 能 的 事情 ， 幸 而 实际 上 约束 品 性 通常 是 成 立 
RK, BRO IRT At, 0u Anm eo, Me 的 存在 是 很 合理 的 ， 
Mott, Ams Mis °°; op BRAT N Lagrange $F X Kuhn-Tucker 
EF, 它们 满足 定理 3.8 的 一 阶 条 人 性. 我 们 叙述 另外 两 个 约束 品 
性 以 结束 这 节 , 它们 蕴涵 (3.75), 在 这 意义 下 它们 比 已 给 出 的 那个 
要 更 强 . 

Kuhn-Tuoker 细 原来 的 约束 品 性 , 在 点 EX 要 求 任何 向 量 
zE Z (a) 与 包含 在 X PHARM. 即 对 每 个 zE Ga (wo)， 
存在 一 函数 w， 它 的 定义 域 是 [0, JCR AERAR p, EB 
a0) = H OLIK HalPECX_ a HE I=0 可 微 以 及 对 某 个 正 
MAR 


da(0) _ 
oo (3.90) 


另 一 个 约束 品 性 是 由 Mangasarian、Fromovitz'25 引 进 的 , 设 % 和 
乌 在 点 9 分 别 是 可 微 与 连续 可 微 的 , 如果 向 量 Vi (2°), fed, …， 
2 是 线性 独立 的 , AER eR", 使 得 
TVga) <0, EIl), (8.91) 
Vile) =0, j=l, ---, p, (8,92) 
则 约束 品 性 成 立 。 当 约束 函数 是 某 种 类 型 时 适用 的 进一步 的 约束 
品 性 将 在 下 一 章 中 给 出 . 
关于 最 优 性 的 一 阶 必要 条 件 在 文献 中 曾 广 泛 地 讨论 ， 除 了 本 
章 利 第 一 章 列举 的 参考 文献 外 ， 读 者 可 以 在 下 列 作者 的 著作 中 我 
到 最 优 性 条 件 的 分 析 : Bazaraa™, Bazaraa, Goode, Braswell, 
Marban™® ®, Canon Cullum, Polak", Dubovitekii, Milyutin", 
Gamkrelidze"™, Halkin Neustadt, Neustadt"), Ritter 2 33, #4 
和 Wildes, 更 特殊 的 最 优 性 条 忻 ， ERIE F LR MER 
性 规划 的 ， 也 将 在 后 面 几 章 中 讨论 . 
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3.2 二 阶 最 优 性 条 件 
本 节 讨 论 关 于 问题 (P) 的 合 有 二 阶 导 数 的 最 优 性 条 件 。 我们 
从 二 阶 必要 条 件 开 始 , 它 补充 了 前 节 的 Kuhn-Tuoker 条 件 ， 然 后 
叙述 并 证 明 在 问题 (P) 中 最 优 性 的 充分 条 件 ， 扩 充 了 第 二 章 的 相 
Wei. 
读者 可 以 回忆 起 , 在 我 们 关于 一 阶 必 要 条 件 的 推导 中 , 它们 是 
作为 “集合 的 某 个 交集 是 空 集 ”这 一 事实 的 结果 得 到 的 ， 对 于 二 阶 
的 情形 , 可 以 遵循 同样 的 途径 . 有 一 个 这 种 形式 的 非常 优美 的 推 
导 , EJAT Dubovitskii, Milyutin™’, # Messerli、Polakg"”*! 的 类 
似 的 推导 中 , 得 到 了 基于 弱 Lagrange 式 的 某 个 一 般 的 二 阶 必 要 条 
忻 ， 它 可 用 于 上 共有 最 低 限 度 正 虽 性 条 件 的 问题 ，、 然 而 ， 为 了 使 结 
论 与 证 明 简 短 些 , 我 们 将 辆 牲 一 般 性 .下列 结果 是 MoCormiek"3 
得 到 的 , 他 也 导出 了 关于 问题 (P) 的 最 优 性 充分 条 件 , 这 将 在 后 面 
给 出 . 
在 下 面 的 讨论 中 ， 我 们 假定 出 现在 问题 (P) 中 前 函数 了， 
gu o Gm: Pa, ts ty 是 二 次 连续 可 微 的 . 首先 将 叙述 二 阶 约 东 
mE, Hoe X, 定义 
81 (a) = {2:7 Vg (az) =0, tE I (@), Lyh (a) 一 0 f=, =, p}. 
(3.93) 
如 果 每 个 非 零 的 ELAO 与 包含 于 I 的 边界 中 的 一 条 二 次 可 
PUMA, WA CX 处 二 阶 约 东 品 性 成 立 ， 妇 对 每 个 
zE 21(z0), 存在 一 个 定义 在 [0, ICR 上 、 ERER 中 的 二 次 可 
微 函数 a, 使 得 «(0) = HRH Oee 有 
gi(a(0}) =0, EI), bla(d)) =0， j=l, ,Pp 


以 及 对 某 个 正 数 入 有 
Get0) 
da = AZ, 


于 是 我 们 有 以 下 定理 ， 


#3 


定理 3.10( 二 阶 必 要 条 件 ) 
设 巡 是 问题 人 PP) 的 解 ， 并 设 存在 满足 (3.72) 至 (3.74) 的 向 景 
AY 一 (Aq, ha Am) 和 = (3, va 3)", 进一步 设 在 m" ARZ Brey 
束 品 性 成 立 , 则 对 * 关 0 且 zE 242), BAA 
[VEE -Nv gle) -$ vb a) |>0. (8.2) 
GEH] $240 HEt), HS a(9) 是 在 二 阶 约束 品 性 
”中 假定 的 向 量 值 巩 数 ， 即 a (0) = 2", da (0) /dO =: (因为 F(a") 是 
锥 ,不 失 一 般 性 可 假定 入 =1)， 令 eaa(0) /49?=w， 从 (3.94) 和 链 
式 法 则 可 得 
SILO) -wzy (ozTaoryyifzn -0， iT)， 
(3.97) 


POE) gha tuha), j=l, … p. 


(3.98) 
M (3.72) E (3.74) Ai Zra") 的 定义 , 我 们 有 


LEO) — 95 (at) mat [BN vo lo) +3 vhs) |=0, 
(3 .99) 


因为 2* 是 局 部 极 小 值 点 而 中 (at0) ) /dO = 0, 可知 df ia(0) ) /ad0” 
=Q, fill 


FEO) =z Vf (a) eu of la") >0. (3.100) 


FAHY AFF (3.97) (8.98), M(3.100) RH, 36 AA 
(3.72) E (3.74), 我 们 得 到 


Zl vif (æ) -5 MY (2") 一 > HV hla") | z>0, (3.102) 

1 

确认 二 阶 约束 品 性 至 少 和 一 阶 的 同样 困难 ， 然 而 有 一 种 相对 

简单 的 情形 ， 它 蕴涵 了 一 阶 和 二 阶 约 束 品 性 。 如 果 向 量 vg. (2), 

tE L(x) Al Viu (e), j=l, +, 了 十 线性 独立 的 , 则 两 类 约束 品 性 在 
it 


ze X E, A 
3.2.1 
MoCormick*”3' 用 下 述 问题 去 说 明 一 种 情况 ， 即 上 述 定 理 中 的 
一 人 阶 必要 条 件 能 够 用 来 减少 满足 一 阶 Kuhn-Tucker 茶 忻 的 点 的 
数 日 *， 求 参数 6>0 的 值 ， 使 得 原点 是 下 述 问 题 的 局 部 极 小 值 
版 : 
min f(t, 2) = (a 一 工 ;2 十 (29) a (3.102) 
受 限 制 于 
yo (Cas 
91 (ti, Ta) 一 一 2 十 339. (3.103) 
一 阶 和 二 阶 约 东 品 性 成 立 (为 什么 ?) Lagrange 式 给 出 为 
Lle, ND = (21—1)*+ (2)°—-A | -a+ de, (3.104) 
对 任何 SO, 取信 一 2 Kuhn-Tucker 条 件 在 点 2" 一 《0, OWE, 
校 核 二 阶 必 要 条 件 ,我 们 厦 到 工 ce 一 1 ,县 


23 (a*) = {2:2€ Ba 2 —0}"*, (8.105) 
这 样 ， 21(z") 中 的 任何 向 量 有 形式 (0， zs)”, 因此 (3.96) 这 时 变 成 
2 0 
0 4 
O, 本 | a „a (eepos (3.106) 


从 而 B<2 时 , 原点 显然 不 是 局 部 极 小 .这样 , 满足 Kuhn-Tocker 
条 件 的 8 值 的 集合 大 大 地 缩减 了 . 1 

现在 让 我 们 转向 问题 (P) 中 最 优 性 的 充分 条 件 . 这 样 的 条 件 
H Hestenes, King agp MeCormiok*" Hy, 4b 18S BS K 
被 Hiaceo5 加 强 . 

用 了 (lo") 记 这 桩 的 指标 《的 集合 ， 对 于 它 ge") =0 A (3.72) 
至 (3.74) HERA WE. XF, Pe) IC WTR. + 

ria) = {2:2 ygqi(a") =0, 5E7(o)，zrvgi(o) SO, 
i€ Ila), Aha") 一 0 j=1, =, p}, (8.107) 
9S EPR MEA ROSH 
7 Rie. Py fee € A, m0} hia. 
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HA Ze) CHa"), MARINA TRWKARE, 它 的 证 明 
是 属于 McCormick WaS, 这 些 条 件 是 定理 2.8 的 直接 推广 ， 

EH 8.11 

Beak 对 于 问题 (P) 是 能 行 的 ， 若 存在 向 量 外 和/， 满足 


aLla, A, p) =f Ca) iN vala) — wjwhy(a") 0, 


(3.108) 
Mos(a")=0, i=1, =, m, (8.109) 
入 0， (3.110) 


HITE 240 H 2E (a), 可 得 
ral [ws (2 ) -> MY gi (@") -2 uyy” hy") | 2>0, 
| (3,111) 
则 w* 是 问题 (P) 的 严格 局 部 极 小 值 点 . 
【证 明 】 很 定 (3.108) 至 (38.114) 成 立 而 ”不 是 严格 局 部 极 
小 值 点 ， 则 存在 一 个 收敛 于 到 的 能 行 点 列 {2 号, zea", 使 得 对 每 
Az, 
ISAIA). (3.112) 
A =a tiy 其 中 >o A yel 不 失 一 般 性 , 假定 序 
BLO, y AA O, 9), Ply =L, BOA a RETA, 
pegla) = Vga ta) 0, EL, 
(3.113) 
hy(2*) h (a*) = 0 (y") vh aty) =0, j=l, +, p, 


T A 3.112) 有 

FES) =0" (y*) Vf +O) 0, (3.115) 
Rp of, nt, 05L, A O* AR (B.113) (3.115) 并 
取 极 限 , 我 们 得 到 


(y)*vgla")20, ¢E I(x"), (3.116) 
@) Vh") 一 0， j=1, =, p, (3.117) 
(WD "Vf ce) <0, (3.118) 
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yido 


BME CEL"), 3.116) 作为 严格 的 不 等 式 成 立 , 则 联合 
(3.108) .(3.116) 和 (3.117), 我们 得 到 
GIVE) ~ VND 991 @) +B wp) hyo") >0, 
(3.119) 
RARP. PELRI-- WET) AG) Vala) =O, 因 
i yE a), A Taylor 定理 我 们 得 到 
9) = eC") 二 GY) PV g(a") 
+O)" Lge la" + 104) yO, 


i=l, =, m, (3.120) 
hy (2) = hy(a"*) +O Th a") 


+ (09e) Evh la" +E)" =O, 


g=1, +, p, (3.121) 
FOF) =F WY VF @) 
+5 (OF)? Lv (at +£40%9") Jy" <0, 
(8.122) 


RPE, é SRRAOGIZAMH. BH A R 
(3.120) Fu (3.121) 并 从 (3.122) 中 减 去 , 就 产生 


ory) VF (at) EN Vga") — Si uivhy oy} 
+ HG) Lv ot BBY) — EV g at + Oy) 
Suv th + Boy" 1y*<0, 8.123) 
由 (3.108) ,上述 花 括 号 中 的 表达 式 为 0, 用 去 (RATKA 
并 取 极 限 ,我 们 得 到 
Dvr- nv gla") Sv ho <0. 
(8.124) 
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Rey ke we ee a) 中 ， 可 推 知 (3.124) 与 (8.111) 第 
E. J 

HE, MBAS. VDSS Pi RARE Lie, A, RF 2 
的 二 阶 导数 矩阵 ，hHiacco (KE, EEA RAR De 
严格 极 小 时 的 充分 条 件 . 至 于 细节 , 有 兴趣 的 读者 可 参考 [14] 和 和 
[15]. 

例 3.2.2 

再 考虑 例 3.1.4 中 给 出 的 问题 . 我 们 已 经 证 明 ,《 至 少 ) 有 三 
个 满足 最 优 性 必要 条 人 性 的 点 .让 我 们 检验 充分 条 御 . Ho", 有 
名 (oz = {0}， 从 而 没有 向 量 zx*0 使 :E 旬 (zt)， 所 以 定理 3. 并 
的 充分 条 件 自然 满足 ， 读 者 可 以 验证 这 些 条 件 在 史 也 成 立 ， 但 
是 在 g, j 

Za) = {(21, zg) a= 0}, (3.125) 

Wo tHE E(B 111) HHK E (Vidz CHUTA +0 是 
负 的 , RE 2 不 满足 充分 条 件 。 J 


3.3 Lagrange 式 的 鞍点 


还 有 另 一 类 型 的 最 优 性 条 件 与 Lagrange RA KAI HE M 
RARER. 这 里 我 们 叙述 这 些 条 件 中 的 几 个 , 对 于 出 现 于 非 线 
性 规划 问题 人) 中 的 下 数 的 性 质 ， 并 不 要 求 作 特 殊 的 假定 ， 有 趣 
的 是 注意 到 ， 本 章 头 两 节 中 用 到 的 可 微 性 假定 在 某 些 未 来 的 结果 
中 可 以 舍 去 ， 在 更 后 几 章 中 , 我们 将 限于 对 特殊 的 函数 类 加 强 这 
些 结果 . 

设 生 是 两 个 向 蕊 变量 ce DCH AlyCRCR 的 实 函 数 . P 
ERE DXB, —Pp (ey), CED, YOR ROHR 
E, MRM ce DAMyCL A 

D(x, y) EDR, y)< O(a, p. (3.126) 

与 非 线性 规划 (P) 相 联 系 , A PRA, E RRN TF: 
(9) R— Nee R", KER, ASO A MER, 18 43 (2, à, p) 是 
Lagrange 式 
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A EEN -Š nga) -$ uhl (8.127) 
的 鞍点 , 即 对 一 切 ER, ACR”, ASO Muce, 有 
L(G, n <L, i, D<L(@, 2, p). (3.128) 
在 Lagrange 式 的 通 点 与 问题 (P) 的 解 之 间 的 一 个 单 人 出 关系 
在 直面 的 结果 中 给 出 , 
定理 3.12 
H(z, A, p) ES) 的 解 , 则 5 是 问题 卫 ) 的 解 ， 
【证 明 】 Ce, A, wo) ET (S) 的 解 , 则 对 所 有 2zE RA R, 
ASO 和 we R, 有 | 


JO -Èn -Èh O < O- È DD h(a) 


<fa- age (7) 一 py hey lE), 
(3.129) 
整理 第 一 个 不 等 式 , 我 们 得 到 
Š: (ugl) tp) (3.130) 
对 于 所 有 入 ERB” ASO A WER? mor, MERRIA k, 1A 
<P, 有 iy (@) > 0, 对 于 ¢=1, ree, M, a hha, 当 j#k Ry Hi 
一 py 令 =i, MER ala > 0 4 8.180) FIR. 如果 对 某 
个 五 h(t) <0, 我 们 可 以 选取 适当 的 ww， 得 到 类 似 的 矛盾 . 这样 ， 
Xj j=Ł, "p, hy (2) =0, 现在 令 u=p MAHA +1, HEM A= 2, os | 
N, 令 heey, 我 们 得 到 gi(2) = 0, & do= ħati, 并 对 二 |， ore, Mh, 
62, Shh, Worle) >0, HHA’ BRAT, 我 们 得 到 
Zj i=l, =, m A(z) 2S, 由 此 可 知 2 关于 问题 (了 ) 是 能 行 的. 
然后 令 入 =0,， 则 由 (3.129) 中 第 一 个 不 等 式 , RNA 


0<—Siys@). (3.181) 
{AX} i=1, +, m RE TSO Fl gE) HO, 所 以 ， 
à Kage (2) =0, (3.132) 
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HOM BTA è RE g (E) =O, 
现在 转向 (3.129) 中 的 第 二 个 不 等 式 ， 从 上 述 论证 可 得 
FESS -S kgl) -Èl (8.138 
如 果 w 关 于 (了) 是 能 行 的 , 则 ga) =O A hy (w) =O, 这 祥 
fT) < fix), (3.134) 
7 就 是 (P) 的 解 。 

ER, Ait Lagrange HAMAR, MBP) PH EARL 
充分 条 件 总 成 立 。 然 而 , MRAR S, gw RETAN, RIA F 
述 有 趣 的 结果 (与 定理 3.2 比较 之 ). 

定理 3. 了 3 

wf, i» tts Gm, hy, na hy Fé Fy Oy eH BL (£, a, jt) 是 问题 
(S) 的 解 , 则 Ze) 2? (@) <0, B 

VLE, i D = VF E Ñ uvg) Sv =0, 


| (3.135) 
Ms (T) =, =1, ser, M, (3.136) 
AO, (3.187) 


【证 明 】 在 前 面 定理 的 证 明 中 我 们 看 到 , WRZ, i, p (S) 
的 解 , 则 gi (2) =O, i=1, =, m, A hy (T) =0, j 一 4,…, p. $ 
然 按 定义 入 满足 (3.137)、 由 但.128) 的 第 二 个 不 等 式 可 知 , 对 每 
T zE pH a> A 


L(@, 7, p) <L(@-+az, i, j). (3.138) 
这 样 ee ee 
0x L(t+az, ie H 一 五 (人 ， A, Ib) ; (3.139) 
400, 我 们 得 到 , WED ERRE 
0<2"y,L(#, i, ji). (3.140) 


PUA, (3.135) 必 定 成 立 ， 由 定理 3.2 可 知 ， 人 .135) 至 (3.137) 成 
立 的 充 要 条 件 为 21(2) NE=, J 
注意 ， 虽 然 Lagrange 式 的 鞍点 蕴涵 了 (3.135) 至 (3.137) 成 
立 , 而 无 须 附 加 的 正则 性 条 件 ,但 全 ) 的 最 优 解 z* — ASE 
$0 


Æ (3.185) 8 (8.187) H (A, uO RIFET, BREE P) EMTA 
(3.71) 这样 的 条 件 . 
定理 3.13 和 例 3,1 工 一 起 意 昧 着 ， 定 理 3.12 的 道 定理 一 般 
不 成 立 ， 我 们 现在 给 出 一 个 十 分 简单 的 例子 以 说 明 这 点 . 
例 8.8.1 
设 我 们 有 如 下 规划 ; 
min f(z) =g (3.141) 
受 限 制 于 
— (@)?>0, (3.142) 
最 优 解 是 罗 一 0 相应 的 Lagrange 式 的 鞍点 问题 , FER ASO ff 
fa Bt cok A 
BA a") Fa" +A" (a") <a tat (2), (3,143) 
或 者 等 价 地 , 有 
0<2Z 十 和 (2 (3.144) 
ERAN RENO (ASEM EAT A" > 0, ROT GR o> - 1/0", M 
WH (3.144) HEAR. 这 样 就 不 存在 入 使 得 (从 ， ARRAY 
下 一 章 将 讨论 这 样 的 非 线 性 规划 ， 其 中 的 日 标 函数 与 约束 函 
数 满足 一 定 的 凸 性 或 止 性 要 求 ， 如 果 这 样 的 规划 也 沟 足 某 些 约束 
mitt, WEA 3.12 的 逆 定 理 对 于 它们 成 立 ， 即 (3) 的 解 的 存在 性 
是 (了 中 最 优 性 的 必要 条 件 . 
鞍点 是 与 对 策 论 紧密 相关 的 ， 其 中 利益 冲突 的 两 个 局 中 人 彼 
此 反对 对 方 ， WFAA ER EH RR Ole, y) —P RPA 
关于 2 求 下 的 极 小 , 而 另 一 个 局 中 大 关于 4% 求 丐 的 极 大 ， 这 称 为 
和 下 的 极 小 - 极 大 光 ( 或 极 大 - 极 小 化 ).， 对 策 论 及 其 在 经 济 中 应 用 
的 数学 基础 是 由 von Neumann H = fj, Æ Von Neumann 和 
Morgenstern 的 经 典 著 作 5o:" 中 有 描述 . 
我 们 建立 鞍点 与 两 个 向 量变 量 的 函数 的 极 小 -和 极 大 化 问题 之 
问 的 联系 来 结束 这 一 章 . 
引 理 3.14 
BOAT REE eC DCH A yE ECR” Hews, 则 
oi 


max min O(a, y) <min max B(s, y), (8.145) 


yEE 2€D 


RE LTRK IE S BAUMERT. 
【证 明 】 SEMI YEE, RANA 


min P(w, y) <B (e, y). (3.146) 
类 似 地 , IHLA EHI we D, | 
Pla, y) <max P(a, y), (3.147) 
RER we D N ye E, 
min P(e, y) <max Dw, y). (3.148) 
结果 得 到 
max min D(a, y) <min max @ (a, y), (8.149) 
1 
fi 3.8.2 
TREE A= [es 可 以 看 作 是 由 
Bi, j) may (3.150) 
给 出 的 两 变量 多 7 的 实 值 函 数 。 令 
本 -| 1 | 5 
1= -i i? (8.151) 
则 
max min ayy = max (min Gy, min aa) =max(—1, —1)=—1, 
(3.152) 
min max ay=min (max ais, max @2;) =min(1, 1) =1. 
(3.153) 
R 
max min pli, 7) <min max (i, 3), (3.154) 
63.145) 作为 严格 不 等 式 成 立 ， 另 一 方面 , 取 
1 2 
4-| 1 a (83.155) 
读者 容易 证 明 
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max min i = = min max Rij (3.156) 
1 i i 了 


(8.145) 作为 方程 成 立 ， 了 
(3.145) 中 等 号 成 立 的 必要 和 和 充分 条 件 戈 四 有 鞍点 ， 形式 
地 , 有 下列 定理 . 
定理 3.15 
设 引 理 3.14 的 假设 成 立 , W 
max min (e, y) =P (a, v) =min max 多 (x, y) (3,157) 


HEEREN G, PE D WBE, 
GER] 设 (z, yE © RE, W 
max (z, y) <O(%, j) <min p(s, F). (3.158) 


也 有 
min max O(a, y) < max x Dix (a, y), (3.159) 
ED yer 
min SG (a, y) Smax min O(a, y). (3 .160) 
ren uch wED 


联合 上 面 三 个 关系 式 , 我 们 得 到 


min max (x, y) <P (z, y) <max min @ (x, a), 
ven yER 


(3.161) 
rept (3.161) 和 (3.145)， 我 们 断言 (3.157 必定 成 立 . 反之 ， 设 
(2, y) E 


max (z, y)=min max O(a, y) (3.162) 
: ved PED YEG 
各 
min ® (x, y) =max min O(a, y), (8.163) 
zen yEE 了 ED 了 


若 (3.157) 成 立 , 则 由 (3.162)、(3.163) 以 及 极 小 和 极 大 的 定义 ,我 
们 得 到 
D(z, y) <max D(z, y) = P(x, y) = min d (a, y) <P, 9), 
(3.164) 
HED HRA (ze, y). J 


B.A. 


3.B., 


3.¢. 


3.D. 


3.E. 


3.F. 


3.0. 


练 J 


对 于 约束 

《21)2- (zo —-1)°<1, (3.165) 

zars), (3.166) 

IR EAS B ERR F (a1, w), 个 得 在 29 = (0, OA 

ELM) 9 £40) =O, (3.167) 
县 这 点 人 不 是 一 个 局 部 最 优点 . 
设 Aa #0 A: Æ RIESE, 证 明 A: cA Bie ALC Aj, BY Ag UIE 
法 锥 包 食 在 Ax HEHEH, 


EPA FCP) ETT SE X HHA --4 E, 《2Z1(2))' (SCX, Ey, 
IRA SER ACR WAR, MAE CROWDER, HR 
(SCA, 到)) 
求 超 方 体 

A= {nize BR", Oszi, j=), +, n} (3.163) 
EU DO 
证 明 引 理 3.7 的 下 述 推论 : M2 RAB PMB, Be eX ARB, 
则 fct) =O, 


给 定 问 题 ， 
max 4a44-2ite (3,169) 

| 受 限 制 于 
gı log T- x14120, (3.170) 
© 0, (3.171) 
3a —2 (ay)? 1, (3.172) 


$.H. 


8.1. 
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证 明 不 存在 点 x" € R? 满足 最 优 性 的 Kuhn-Tucker 必要 条 件 ， 有 没有 
满足 定理 3.40 Fritz Jobn 条 件 的 点 5 
为 了 求解 问题 : 

minlar)? + (aa) g (3.173) 


受 限 制 于 
(24~1)?— (42)? 0, (3.174) 


建议 弄 助 于 求 相应 的 Lagrange AREMA. 讨论 在 这 样 做 时 可 能 产 
生 的 困难 ， 

对 于 问题 (P) 的 一 种 约束 品 性 如 下 所 述 : A E ya), CE T(x*} 和 
Wage"), Ja, o p, ARSE MA, TAR PE SCX, 2*》 
=Z"), (Ra +R. 【提示 : F gO) = Gi)? + Ga)? ~ a9, Mo) 一 Xa, 


3.K. 


3.1L. 


3.M. 


FR a" =(0, 0, 0).] 


| RUBE TERMER X 区 whn-Tacker 必要 条 件 


max f(s) (3.173) 
RBIF 
BACGHE 0, i=1, wees k, (3.176) 
gf2)<0, t=k+1, ++, m, (3.177) 
hem)=0, jal, +, p. (3.178) 
证 明 下 列 属 于 J. W. dibbs(1876》 的 结果 : 给 定 问 题 
min f(a)=3 Fay) (3.179) 
受 限 制 于 
oO j=l, =, n, (3.180) 
32-1, (3.181) 
其 中 了 是 可 微 函 数 . Oo 是 这 问题 的 解 , 则 存在 数 u" 使 得 
fap", g>, . (3.182) 
FISH NA, T=0, (3.183) 
其 中 扳 表示 微 商 . 
给 定 非 线 性 规划 7 
min fle) -ù 4 (8.184) 
受 限 制 于 
2 ag,=b, (3.185) 
x= 0, (3.186) 
其 中 a, b,c, BERG, WAAR Be PASE, 
[Seen]! 
这 (3.187) 
对 非 线性 规划 : 
min f (2) -3 Cy (3.188) 
受 限 制 于 
gfey>0, i=l, e, m, (3.189) 


3.N. 


EP o RRENTSASHM, g EMER. WA oO 是 问题 的 
解 , (CEDERE e" 成 立 , 则 PCa) +B, 
在 下 而 的 问题 中 , 证 明 向 二 2° b/ 1 好 满足 最 优 性 的 充分 条 件 ; 


oS 


max hr, re kh” (3.190) 


FEIF ET Gn 
3th elf brO 是 给 定 的 . 
3.0. Bie HR 
1 ~ (a ~—2)?— (rp 5)90, (3.392) 
1 一 《zl 一 2)2 一 (2) >0, (3.193) 
m-220, ` a (3.194) 
画 出 能 行 集 , 并 证 明 对 任何 <e X, 
CELY # (SCX, 2), (3.195) 
但 二 阶 约束 品 性 是 满足 的 ， 
3.P. 汗 线 性 规划 问题 
max (T9)’— 2e — (21)? (3.196) 
2 pa HE 
SERE (w+ (aa, (3.197) 


to 


用 某 种 数 信 算 法 在 计算 机 上 求解 MT We RE, 这 算法 收敛 到 四 

个 不 问 的 点 : 

(1) 24=—1.000, z=0.000; (2) 2y=—1.000, wa=0.000; 

(3) m=— 0.500, 29=0.866; (4) 2,=—0.500, z= — 0.866; 

(a) 检验 所 有 这 些 点 是 否 满足 最 优 性 的 及 unhn-Tucker 必要 条件 .而 
出 能 行 集 并 确定 这 些 点 上 一 院 约 束 品 性 是 否 成 立 . 

Cb》 假定 二 阶 约束 品 性 在 前 面 每 一 点 成 立 » HES Be TEBI Bh ah aE Ae 
t. 

(ce》 最 后 ， 导 出 在 这 问题 中 的 严格 最 优 人 性 的 充分 条 件 ， 并 在 满足 必要 
条 件 的 每 个 点 上 验证 它们 ， 


参考 xX 献 


ABADIE, J., “On the Kuhn-Tucker Theorem,” in Nonlinear Programming, J. 
Abadie (Ed.), North-Holland Publishing Co., Amsterdam, 1967. 


Arrow, K. J, L. Hurwicz, and H. Uzawa, “Constraint Qualifications in 
Maximization Problems,” Naval Res. Log. Quart., 8, 175-191 (1961). 


Bazaraa, M. S., “Nonlinear Programming: Nondiferentiable Functions,” 
Ph.D. dissertation, Georgia Institute of Technology, Atlanta, 1970. 


BAZARAA, M. 5., and J. J. Goovr, “Necessury Optimality Criteria in Mathe- 
matical Programming in the Preseace of Differentiability,” J. Math. Anal. & 
Appl., 40, 609-621 (1972). 


56 


Bazaraa, M. S., J. 了 Gooner, and C. M. SHETTY, “Constraint Qualifications 
Revisited,” Management Science, 18, 567-573 (1972). 


BELTRAMI, E, J., “A Constructive Proof of the Kuhn-Tucker Multiplier Rule,” 
J. Math. Anal. & Appl., 26, 297-306 (1967). 


BERGTHALLER, C., private communication, 1971. 


BRASWELL, R. N., and J. A. Marban, “Necessary and Sufficient Conditions 
for the Inequality Constrained Optimization Problem Using Directional 
Derivatives,” Iat. J. Systems Sci, 3, 263-275 (1972). 


Braswell, R, N., and J, A. Marsan, “On Necessary and Sufficient Condi- 
tions in Non-Linear Programming,” Int, J. Systems Sci., 3, 277-286 (1972). 


Canon, M. D., C. D. Cuttum, and E. Porax, “Constrained Minimization 
Problems in Finite Dimensional Spaces," SIAM J. Contrai, 4, 528-547 (1966). 


Dusoviiskn, A. Y., and A. A. MILYUTIN, “Extremum Problems in the Pres- 
ence of Restrictions,” USSR Comp. Math. and Math Phys., $, 3, 1-80 (1965). 


Evans, J, P., “On Constraint Qualifications in Nonlinear Programming,” 
Naval Res. Log. Quart., 17, 3, 281-286 (1970). 


Farkas, J., “Uber die Theorie der Einfachen Ungleichungen,” J. fiir die Reine 
und Angew. Math., 124, 1-27 (1902). i 


Fiacco, A. V., “Second Order Sufficient Conditions for Weak and Strict Con- 
strained Minima,” SIAM J. Appl. Math., 16, 105-108 (1968}. 


Fracco, A. V., and G. P. McCormick, Nonlinear Programming: Sequentiat 
Unconstrained Minimization Techniques, John Wiley & Sons, New York, 1968. 
GAMKRELIDZE, R. V., “Extremal Problems in Finite-Dimensional Spaces,” J, 
Optimization Theory and Appl., 1, 173-193 (1967). 

GouLD, F. J., and J. W. ToLLE, “A Necessary and Sufficient Qualification for 
Constrained Optimization,” SIAM J. Appl. Math., 20, 164-172 (1971). 

Gou Lb, F. J., and J. W. Tote, “Geometry of Optimality Conditions and Con- 
straint Qualifications, Math. Prog., 2, 1-18 (1972). 

GUIGNARD, M., “Generalized Kuhn-Tucker Conditions for Mathematical Pro- 
gramming Probiems in a Banach Space,” SIAM J. Control, 7, 232-241 (1969). 


Havin, H., and L. W. Neusrapt, “General Necessary Conditions for Optimi- 
zation Problems,” Proc. Natl. Acad. Sci., 56, 1066-1071 (1966). 


` Hestenes, M. R., Calculus of Variations and Optimal Contro! Theory, John 


Wiley & Sons, New York, 1966, 


Jonn, F., “Extremum Problems with Inequalities as Subsidiary Conditions,” 
in Studies and Essays, Courant Anniversary Valume, K. D. Friedricks, et al. 
{Eds.}, Interscience Publishers, New York, 1948. 


KARLIN, S., Mathematical Methods and Theory in Games, Programming and 
Economics, Vols, Land II, Addison-Wesley Publishing Co., Reading, Mass., 
1959. 7 


a7 


24. 


26. 


27. 


28. 


29. 


30, 


3I. 


32. 


33. 


34, 


35. 


36. 


37. 


38. 


Kino, R. P., “Necessary and Sufficient Conditions for Inequality Constrained 
Extreme Values,” Jid. & Eng. Chem. Fund., 5, 484-489 (1966). 


Kunn, H. W., and A. W. TUCKER, “Nonlinear Programming,” in Proceedings 
of the Second Berkeley Symposium on Mathematical Statistics and Probability, 
J. Neyman (Ed.}, University of California Press, Berkeley, Calif., 1951. 


MANGASARIAN, Q, L,, Nonlinear Programming, McGraw-Hill Book Co., New 
York, 1969, 


Manaasartian, Ô, L., and S. Fromovitz, “The Fritz John Necessary Optimality 
Conditions in the Presence of Equality and Inequality Constraints,” J, Math. 
Anal. & Appl., 17, 37-47 (1967). 


McCormick, G. P., “Second Order Conditions for Constrained Minima,” 
SIAM J. Appl. Math., 18, 641-652 (1967). 


Messer, E, J., and E., PoLAK, “On Second Order Necessary Conditions of 
Optimality,” SIAM J. Control, 7, 272-291 (1969). 


NEUMANN, J, von and O. MORGENSTERN, Theory of Games and Economic 
Behavior, 2nd ed., Princeton University Press, Princeton, N.J., 1947. - 


Neustapt, L. W., “An Abstract Variational Theory with Applications to a 
Broad Class of Optimization Problems, I, General Theory,” J. SIAM Control, 
4, 505-527 (1966). 

RITTER, K., “Optimization Theory in Linear Spaces. J,” Mash. Ann., 182, 189- 
206 (1969). 

Ritter, K., “Optimization Theory in Linear Spaces Part II, On Systems of 
Linear Operator Inequalities in Partially Ordered Normed Linear Spaces,” 
Math, Ann., 183, 169-180 (1969). 

RITTER, K., “Optimization Theory in Linear Spaces Part IN, Mathematical 
Programming in Partially Ordered Banach Spaces,” Math. Ann., 184, 133-154 
(1970). 

SLATER, M., “Lagrange Multipliers Revisited: A Contribution to Nonlinear. 
Programming,” Cowles Commission Discussion Paper, Math. 403, November 
1950, 


Vararya, P., “Nontinear Programming in Banach Space," SIAM J. Appl, 
Math., 15, 284-293 (1967), 


WHITTLE, P., Optimization Under Constraints, Wiley-Interscience, London, 
1971. 


WILDE, D. J., “Differential Calculus in Nonlinear Programming,” Operations 
Research, 10, 764-773 (1962). 


Oy Sen BH e 


在 前 一 章 开始 部 分 引入 的 数学 规划 问题 可 算是 我 们 将 要 处 理 
的 最 一 般 的 规划 问题 .事实 上 , 对 于 如 此 一 般 的 情形 , 已 难以 多 加 
讨论 .在 本 章 中 , 我 们 将 考察 某 些 非 线 性 规划 , 其 中 涉及 的 函数 共 
有 一 些 特 殊 的 性质. 以 后 将 会 明白 ， 大 多 数 这 汶 的 问题 按 某 种 方 
式 联 系 着 凸 集 和 凸 函 数 . 本 章 提供 一 个 基础 ， 以 理解 这 些 问题 的 
茶 些 最 重要 的 背 景 , 诸如 最 优 解 的 存在 性 、 对偶 性 、 最 优 解 对 小 扰 
动 的 灵敏 度 及 求解 的 数值 算法 ， 在 这 里 ,将 福 述 与 数学 规划 有 关 
的 西 集 和 上 曲 画 数 的 某 些 性 质 ， 这 个 室 述 无 论 如 何不 会 是 完备 无 缺 
的 ， 从 最 优化 方面 的 观点 来 看 ， 对 于 出 集 和 凸 函 数 的 更 完备 的 研 
究 ， 读 者 可 参考 Fenchel'3 的 讲义 ， 或 者 Rockefellar'” Al Stoer. 
Witzgall? 等 新 书 ， 本 章 中 出 现 的 许多 结果 也 能 在 Berge™ 中 找 
到 , 那 书 透彻 地 痢 明 了 基本 的 拓扑 概念 . 

在 六 十 年 代 后 期 , 凸 画 数 的 概念 已 按 许 多 途径 被 扩充 , 以 推广 
关于 凸 范 数 的 极 值 的 结果 ， 这 些 结 果 在 数学 规划 中 具有 基本 的 重 
要 人 性， 这 种 推广 将 在 以 后 几 章 中 介绍 . 


4.1 4 集 


RORR WTR, WRN TRB ee, PEC, BREN 
的 线段 仍 在 C 中 ,， 则 称 C 为 凸 集 .此 处 及 以 后 三 音 中 ,9 常用 来 
表示 满足 下 列 性 质 而 称 为 权 的 有 序数 对 (g go); 

m0, ga>0, gitg=i. (4,1) 

RR, MRSC, WRAAE, CO, Wg EPR, SAR 
(qa tg) EC, BAC RER, 

Gil 4.1.1 

以 下 给 出 点 集 的 例子 ， 
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(a) RAT LMS. 空 集 , 单个 点 2€ R 组 成 的 集合 , 全 
空间 R", 
(b) 设 cz0 是 已 给 向 是 , 5 是 已 给 数 ,集合 
W={a:mE R", cr 一 六  - (4.2) 
称 为 超 平 面 . 它 是 一 个 凸 集 . 
《c) FW bei Ss, RTE AE ZE 
AH’ ={xieE R", ceb} (4.3) 
及 开 半 空间 
五 "一 {r:o6E R", c™a> bd}, (4.4) 
它们 是 由 超 平 面 五 ERK. eS POE Pee RA) HA 
半空 间 与 开 举 空间 , 它们 由 倒转 人 ,3)、(4.,4) 中 的 不 等 号 而 得 到 ， 
所 有 这 些 半 空间 均 为 凸 集 . 


(d) Fk 
Iela) = {wm E R, le-a | <a}, (4.5) 
其 中 ee A 是 一 个 已 给 向 量 , a 是 一 个 已 给 数 ， 可 知 超 球 是 一 个 
mh. J 


SRE R h rh SR KY EE fy BAR ie EAL a PED. 
假设 已 给 Re HHE a, a, …，22， 并 已 给 满足 下 列 条 件 
的 数 a, Qa, =", Op: 
O40, =, dpe 0, Saml, (4.6) 
那么 向 量 2, 2 e, PS OP RM: 
= 0640" gt? +++ 十 Cnp02。 (4.7) 
定理 4.1 
集合 CC 下 是 同 集 的 充 要 条 件 为 : REO, e, ved 的 每 
个 凸 组 合 仍 包含 在 C 中 . 
DEW] RRC WAS, 下 面 对 3 用 归纳 法 来 证 明 ， 当 8s 
=1, 定理 显 然 正确 .现在 设 它 对 s>1 正确 , > 
= aye" oe tae tt, (4.8) 
不 失 一 般 性 , 我 们 可 以 假定 matl FE, 能 把 上 式 写 成 
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T= (1 a) Fast, (4.9) 


此 处 
z=- gt ep a (4.10) 
1 — ol l= a l 
由 于 
0 1. _% +9, S1__% -=1, (4.11 
二 一 ss ? % T= — O41 0; pa: TS — s+ ( ) 


由 归纳 法 很 设 , BAEC, HF OC RP, 就 有 EC 

RZ, 好 果 中 的 点 的 每 个 凸 组 合 包 含 在 CQ 中， 那么 ， 特 别 
地 ，s==2 的 结论 是 正确 的 ; 也 就 是 说 , E002E Cla, S010, 
十 Qa 一 1 AL PA (aa tee RUC RAR. 1 

定理 4.% 

任意 一 组 凸 集 之 交集 仍 为 凸 集 . 

DEA] 设 人 和 呈 是 交集 中 的 点 ， 那 么 它们 也 包含 在 这 组 
凸 集 中 的 任何 一 个 集合 之 中 ,自然 2 二 qr21 十 gyr? 也 如 此 , 所 以 了 
也 包含 在 交集 中 . J 

包含 任意 集合 ACR 的 所 有 凸 集 之 交 称 为 4 的 凸 包 ， 记 为 
Co(A), Hew 4.2, BREE Co(4) 是 四 集 ， 它 实际 上 是 R h 
AE ARRIR, MAEA IC, YR 的 和 是 指 如 下 的 
集合 : 


X +Y = f{e+y:2€ X, yEV}Y (4.12) 
类 似 地 , 一 个 集合 ICR HMB ELH 
AX = fha:ze X, AE B}, (4.13) 


定理 和 .3 

WRC AD fe Br 中 的 晤 集 , 是 一 个 实数 ， 那 么 集合 C+D 
AG AC 也 是 凸 集 . 

这 个 党 理 的 证 明 留 给 读 考 ， 

许多 重要 结果 能 够 利用 凸 集 的 所 谓 分 离 定 理 
来 证 明 . 这 些 定理 论述 Rp PEs OL 和 Ca, 对 于 它们 存 

:着 起 平面 A 使 落 在 五 KHM, Co BEAM. 这 样 的 

超 平 面 称 为 分 离 C 与 Ca 的 超 平面 。 形式 地 说 ， 设 信和 了 是 局 
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的 非 空子 集 ， 如 果 六 包含 在 由 超 平面 A 生成 的 一 个 闭 半空 间 中 ， 
而 包含 在 男 一 闭 半空 间 中 , 那么 就 说 超 平面 H 分 离 S 和 了 . 这 
样 的 超 平面 称 为 分 离 超 平面 如 果 S 包含 在 出 超 平面 H 生成 的 
-个 开 半空 间 中 ， 而 下 包含 在 另 一 开 半空 间 中 ， 那 么 就 说 超 平面 
HERS SAT. 读者 从 直观 上 可 以 清楚 ,给 定 了 到 中 两 个 
互 不 相交 的 凸 集 , 可 以 找到 分 离 它们 的 一 个 超 平面 . 

现在 我 们 叙述 某 些 定理 , 它们 论述 这 种 分 离 超 平面 的 存在 性 . 
这 些 定量 能 从 几 种 途径 来 证 明 ， 我 们 的 证 明 将 利用 拓扑 的 一 些 结 
果 ， 特 别 是 关于 刷 " 中 的 紧 致 集 的 结果 关于 这 些 定理 的 更 完全 
的 研究 及 有 关 钳 果 ,读者 可 以 参见 Berge2， 关 二 分 离 定理 沿 着 其 
他 线索 的 证 明 , 例如 能 在 Rockafellards 中 找到 . 

引 理 4.4 

BEC 是 中 的 非 空间 同 集 , 它 不 包含 原点 , 则 在 在 一 个 超 平 
Mi, 它 严格 分 离 C 和 原点 . 

【证 明 】 令 Se(0) 是 以 原点 为 中 心 的 闭 超 球 , 即 

Sa(0) = {2E R": |ø] <a}, (4.14) 
且 使 Cn S.(0) #9, 于 是 Cn Se(0) 是 一 个 紧 致 集 , ERAM hel 
ZE ON BaCO) KERHA, 极 小 值 点 为 某 个 @ EO, 

ER Ale > 0, 于 是 , 对 每 个 ESs(0) NO H foi > (2, 
同时 , 按 S.(0) 的 定义 , 对 每 个 zcEC 也 成 立 jzj>lzol， 下 面 设 
CROPE—-H. HHORGAR, HER>>, RNA 
(Ag+ (L—-A) 2) EC, H. 


Art (L—A)a° |? jel? (4.15) 
所 以 有 
Qrt (L—A) a)? Cat (L—A)a®) > (a) To, 1h," 
(4.16) 
也 就 是 
(A)? (a~ a)" (w@—2°) +20 (2°)? (o-a) 0, 1>A>0, 
(4.17) 


假如 °) (e—a) = — e <0, 我 们 便 能 选择 充分 小 的 入 使 
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Qe>h(o—~2°)? (9 — 2°) > 0, (4,18) 
FEES 
2). (a)? (e—a) < — (A) (æ — at) (e—a), (4,19) 
从 而 与 (4.17) 矛 盾 , 因此 我 们 必定 有 


(a)? (2— a?) >0, (4.20) 
或 者 说 , 对 每 个 ECO 均 成 六 
(a?) taz (0) 72> 0, (4.21) 
令 au- (0)? (0?) 712， 于 是 超 平面 
Ho~ {ai2€ R", (y =a} (4.22) 


严格 分 离 避 与 原点 。 I 
ME, 我 们 能 够 证 明 以 下 的 定理 ， 
定理 4.6( 严 格 分 离 定理 ) 
BEC. 和 Ca 是 本 中 调 个 互 不 相交 的 非 空 闭 凸 集 ， 并 设 0 是 
紧 致 的 , 则 存在 一 个 超 平 面 严格 分 离 Ca AC, 
【证 明 】 由 于 O: 是 紧 致 集 ， 所 以 01 一 Gs=01 十 (一 C9) 是 闭 
集 ( 例 如 参见 [1,， 2, 3 引 )， 并 且 由 定理 和 .3, CHAR. ATO 和 
“Ca HAH, C:.-Ci 便 不 包含 原点 ， 根 据 引 理 4.4, 必 存 在 一 个 
超 平 面 
He _o= {aia R", (2°)’a=a}, (4.23) 
它 严 格 分离 C1 一 Cs 和 和 原点 ,此 如 EO 一 03 tE O1—- Ca AURA 
距离 达到 极 小 , H. a= (2°)? (2) /2, 
对 每 个 2E Cr 一 Co A. 


(oa)rz> a> 0, | (4.24) 
令 Y 一 一 四 这 里 wE O, 9E 0s, 我 们 得 到 
(u®— 0°)" (u—v) >e>0, (4.25) 
所 以 : 
inf QP — 2°) uz>sup (u°—v°)"y+a>sup (u? — o?) Tw, 
HECL vets vels 
(4,26) 
选择 一 数 如 使 
inf (u? — 9°) "u> B>sup (u°—v°)7y, (4.27) 
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TEETH: eE RY, (2")"e— BYP RAR O MC. ] 

FER TM BRASS, AEB et A 
RRE. MRR CAS, 那 还 可 以 得 到 类 似 十 引 
理 4.4 和 定理 4.5 的 某 种 较 弱 的 结论 . 

引 理 和 .6 

设 C 是 嫩 中 非 空 是 集 , 它 不 包含 原点 ， 则 存在 一 个 超 平面 分 
B O ALR RA. 

【证 明 】 对 每 个 EC > 


Y @@) = {yy E R", yy=1, fr>0)}, (4.28) 
这 个 集合 是 非 空 a 
Ba, o, a O 中 任意 有 限 点 集 .， 因为 0 为止 集 , 根据 定 


埋 和 .1， Fathi © REC 
C= ay" Foran A Sasi, a0, (4,29) 
=i 


这 些 w 的 集合 是 0 PRR RCE dea, e, ot A RA AA E R h 
E). KIE 4.4, 必 存 在 a +0, 使 


O aP, i=l, eh (4.30) 
不 央 一 般 性 , 我 们 可 以 假定 上 述 op WEU) Y= 于 是 
MY (a) #9. (4.31) 


HP Y ORRA Y ={v ve R, y= KATE, BRAR 
RE SA PE I 2) ay 
n Y (a) +0, (4.32) 
选取 任 一 乡 E QY), 于 是 对 每 个 zEC HA g'e, HY 
超 平 面世 :ZE RB”, 六 z= 二 站 分 离 CO 和 原点。 J 
例 4.1.2 
考察 集合 
= {er RY, m>0}. (4.38) 
这 集合 是 ee 它 不 包含 原点 ， 超 平面 {ered RB, o 
“O08 CARA. Al, 不 存在 超 平面 严格 分 离 它们 ， J 
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定理 和 .7( 分 商定 理 》 

ROA Ca 是 吾 ' 中 两 个 互 不 相交 的 非 空 止 集 ， 则 存在 一 个 
超 平面 分 离 它 们 ， 

[E] 集合 C1 一 Cs 是 西 集 , 上 朋 不 包含 原点 .根据 引 理 4.6， 
存在 一 个 向 量 使 对 每 个 EO; 一 0。， 均 有 六 4 之 0, RH, SH 
地 , 对 EC veO,, BH G 人 一 切 关 0、 所 以 存在 一 个 数 司 满足 

inf Fu> B>sup 9", (4.34) 
FRET M{e:2e BR, Ve=—AHBC MC, J 

AL 4.1 提供 关于 凸 集 的 分 离 定 理 的 补充 说 明 ， FE (a) p E 
As J Re Ay BS IK) fi) PATI, 而 (2) 显示 了 不 包含 原点 的 开 西 集 并 非 总 
能 将 它 与 原点 严格 分 离 ，( 引 中 的 例子 说 明 , 引 理 4.4 中 闭 凸 集 的 


人 


my 


|. 


Xr 


(a) Pee TAR O) 不 能 和 原点 严格 分 离 
与 原点 的 超 平 而 Fro 
4 
PET 
2 
上 
LS SS oe 
SSS 
(0) 不 能 产 格 分 离 的 两 个 () 潮 于 具有 公共 边界 点 的 
HARA OR PH SAU Éi 


Mat ORO K 
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假设 是 决定 性 的 ， 类 似 地 ， 正 如 (e) 中 的 集合 所 表明 的 , 定理 4.5 
HC, 为 紧 致 的 假设 是 重要 的 、 最 后 , 着 ( 中 中 我 们 对 定理 生 ."7 的 
假设 条 件 给 出 了 一 个 可 能 的 减弱 ,关于 吕 与 Qs 互 不 相交 的 假 
B, 可 以 代 之 以 信和 Cs 没有 公共 内 点 的 假设 , 这 样 , 它们 可 以 有 
公共 的 边界 点 ， 
作为 上 述 分 离 定 理 的 第 一 个 应 用 ,我 们 现在 证 明 著 名 的 
Farkas 引 理 , 该 引 理 已 在 第 3 章 引 入 , 为 了 方便 , 现在 重 录 于 下 . 
引 理 4.8(Farkas 引 理 ) 
假设 A Af mxn KARE, OAR EM ne, BA, 
对 所 有 满 是 Ay 0 a y HRL by > O 的 充 要 条 和 件 为 : 存在 
m EE p= gE AT p= 
【证 明 】 eee 说 ， Ay 0, by <0 ARR JE R R 
件 是 A*p=b 5 p>0 无 解 。 而 后 一 组 无 解 的 充 要 条 件 是 下 列 非 
空 闭 凸 集 互 不 相交 (参见 习题 4.0)， 
Ci= {s:t E BR", r= Ap, p>-0}, Ca= {b}, (4.35) 
注意 C 是 紧 致 的 
如 果 上 述 条 件 成 立 , 则 由 定理 4,5, 存在 一 个 非 零 向 量 cE RY 
及 一 实数 上 使 "5<xc， 并 对 每 个 zEOa 有 orz>a， 或 者 等 价 地 ， 
对 每 个 p 关 0 A Aoa, 
令 p=0, 我 们 得 到 a<0, RI j=l, 2, m, Sp=(0,-, 
63,0, +, O), Hp; 是 一 个 很 大 的 正 数 ， 我 们 得 到 c7AT=O, H 
此 Ac>0, PRU ce  AyS0 5 by <0 的 解 ， 反 之 4 A pmb 
p=0 X Ay=O, M b’y=p"Ay>O0, J 
分 离 定理 还 能 用 来 证 明 关于 其 他 线性 方程 与 不 等 式 组 的 类 似 
结果 ， 这 些 结果 的 广泛 内 容 可 在 Mangasarian42 中 找到 除数 学 
规划 的 上 且 的 外 ， 凸 集 还 有 一 定 的 研究 兴趣 ， 可 参见 Eggleston 
Fenchel!” Rockafellar® 或 Valentine”, 


4.2 0 函数 


在 进入 本 世纪 前 后 ，Halderc9 和 Jonsen“ h iE T RAe 
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AUR, AULA ROE a RT, FER BOGS te 
足够 的 . BHR f (co) ER HE AS A EH R a h Be 
KEM, RAKHA FAGAR. 图 42 PR A RE 
BY SR FERRER OR, | SP ET a, hik 
数 在 其 定义 域 中 并 非 必然 是 到 处 连续 或 可 微 的 ， 另 一 个 重要 的 观 
侍 是 凸 集 和 冲 琐 数 之 问 的 密切 联系 ， 它 将 作为 我 们 对 凸 函 数 进行 
.形式 研究 的 出 发 点 ， 图 4.2 中 这 些 旺 线 上 方 的 阴影 区 域 都 是 凸 
集 , 这 同样 也 能 用 来 定义 西 革 数 。 由 于 以 后 将 会 明白 的 原因 , 允许 
西 函 数 取 值 无 穷 大 将 是 方便 的 . 


LA Á 


M42 Lise s 
RPRELER MTR DEBRA, PUEH HRA R 
E, OPED, FO 或 是 实数 或 是 too, MA 中 的 子 集 
P(f)={(a, a):@€ DCR", a€ R, flx)<a} (4.36) 
i FHLB. RP) AAR, RINE SOB. M 
下 是 一 些 直接 明了 的 例子 . 
例 4.2.1 
E ERR f= 十 co 是 一 个 凸 函 数 ， 因 为 了 (7) =O, 而 空 集 是 
由 集 ， 类 似 地 ,如 上 了 一 一 BE ee, AA PCP) =a, 
SFE TER 的 真子 集 DD 上 的 凸 谤 数 f. $ 
file) -(/ pe a (4.37) 
+œ, wED, 
ENED LAER S LES PORNT PD, 其 中 所 是 定 
义 在 整个 R" 上 的 讽 数 。 用 这 种 办 法 ， 我 们 总 能 构造 定义 在 整个 
AY FA, FH, ROA, OCH BOB, 则 下 列 函 数 
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EELER ERINRAN 
a=, 


f(a) = -人 see ae (4.38) 
1 


作为 例 4.2.1 的 一 个 结果 , 以 后 除 明确 地 提 到 的 之 外 ,我 们 总 
UA DARE MER Rb. RS 
ED(f) ={e:a€ R”, f(a) <+co} (4.39) 
HA FHARR, ARERR, LRLERPPER EM 
RY. WPE-TOMR, MEDPER 中 的 凸 集 .相反 的 结 
论 一 般 不 成 立 , 这 就 是 说 , 如 果 ED (fF) deh, 那么 了 不 必 一 定 是 
上 是 函数 ， 
设 一 个 隔 数 定义 在 DCR" 上 ， 如 果 改 变 符 导 后 它 成 为 凸 函 
x, WRKEAM AR. Saz, 当 且 仅 当 一 g Ae ES, g AM 
函数 .集合 
Q(g) ={(@, oa) iwE DOR", aE R, gle) >a} (4.40) 
PA g 的 下 图 象 ,而 当 人 @(9) 为 RE hh R, P g AE. A 
下 研究 中 ,在 多 数 情 形 ,我 们 将 只 处 理 西 函数 . 读者 应 当 能 够 修改 
关于 凸 函 数 性 质 的 结论 , 以 得 到 加 函数 的 类 似 性 质 . 
允许 此 应 数 取 值 无 穷 大 ， 便 需要 在 算术 运算 中 保持 一 定 的 谨 
慎 ， 例 如 不 能 进行 不 确定 的 运算 十 oo 十 (一 o0)、 具 有 值 十 ce 与 
一 ee 的 是 通 数 在 应 用 中 不 常 出现 . 因此 , 我 们 将 主要 关心 正常 凸 
函数 , 它 定义 为 无 处 取 值 一 se APSF 十 co 的 凸 函 数 ， 不 是 
下 常 的 西 函 数 就 称 为 非 正常 的 ， 形 式 地 说 ,车 了 是 鼎 函 数 ,对 一 切 
cE R" A f(@)>—oco, HUED(S) +O, 则 了 是 正常 凸 函 数 。 对 于 
ED(f) SF — A AVIE Hh He, 我 们 现在 能 推导 一 个 更 为 熟悉 的 
结果 ， 它 可 作为 男 一 定义 .已 知 z1€ ED(f)，w?E€ ED(S), w 
(i, EPO), (mB) EP(F)， 那么 对 任何 权 向 量 g， 我 们 有 
(qt +922", ga tga) EPCS). 所 以 
fiae + gat?) <gqya*+ goa, (4.41) 
对 每 个 适合 f(z) Sat, f(a") <a? 的 a, a, RER (4.41) 必须 成 
68 


立 , 所 以 (4 .人 4) 可 以 修改 为 

Flaat qa’) <r f (a) + Gof @), (4.42) 
AER (4.42) EE SEY Th A R E, CEAT “TR A h 
ZEA” REA. 假如 我 们 采用 算术 规则 0. (co) =0-(— co) =O, 
并 避免 不 确定 的 运算 十 ce 十 (一 ce)， 那 么 即使 对 某 些 公有 六 (cc) 
一 十 se R f(t) =—oo, (4.42) 仍 一 般 地 保持 成 立 . 

BSH MR S ELER Hei Te bk, WEHEN ate Cc, 
REO, Gea? Biloga>d, 0 十 9a 一 二 PER (4.42) RORY 
不 等 号 , 那 末 了 称 为 严格 凸 函数 .对 于 严格 凸 函数 , 本 章 记述 有 关 
凸 蚂 数 的 许多 结果 还 可 加 强 , 这 请 读者 去 做 .我们 仅 在 一 ` 二 个 结 
果 中 , 特别 地 提 及 严格 凸 孙 数 . 

下 面 让 我 们 考查 凸 熙 数 的 一 些 基 本 性 质 . 

定理 4.9 

RRR EMER. Sol, oR 再 中 的 点 ， 且 
Gi, q ÆR, WE gte tgi, 

fipa t tga) Saf (a) HgS e). (4.43) 

【证 明 】 如 对 某 个 和 有 了 (9) 一 十 0, 那么 (4.48) 就 平凡 地 成 
立 ， 现 在 设 对 所 有 名 均 有 (1) < 十 co。 了 的 上 图 象 是 一 个 凸 集 ， 
出 定理 4.1， 它 着 包 售 它 的 一 些 点 的 每 个 凸 组 合 、 所 以 (2 a) 
EP(Ff), +, (, AN EPCS) D A m attt, mate 
+q) EP (Ff), BD 


figa t tqa") <q + ega, (4.44) 
Aw at 只 须 满足 jao0 Sa, t=, o, s， 所 以 不 等 式 (4.43) 成 
x. J 
SE #2 4.10 


设 了 是 凸 函 数 , 和 是 非 负数 , 则 AS tee A. 
设 了 和 9 是 凸 函数 ， 则 了 9 也 是 凸 函数 ， 这 里 假定 不 会 出 现 
不 确定 的 运算 十 ce 十 (一 cc). 
证 明 留 给 读者 . 由 此 定理 立即 可 得 以 下 结论 . 
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推论 和 .311 

在 定理 4.10 的 假定 下 ， 设 ae 0, e, AO, M A R 
HEHE Ag fates tire 也 是 凸 函 数 . 

RORY 定义 在 如 上 ， 取 值 在 扩充 的 实数 集中 , 如 果 对 任何 
oce, WW (at) <0 a), WY AAEM. FAE A 
ADPTAN ABR, RAA DA R BREAN OBR. 

定理 &.12 

设 了 是 R LW, BEY BR EIERE A h 
3, WU Cf (e)) SE RY ERAR. 

【证 明 】 由 (4.42), 对 每 个 BINA 

fip tga) <qif a) + 92f (2’). (4.45) 
因为 多 是 非 减 的 , 得 
PF (qua*+qet”)) <E gf (@) Hga fia), (4.46) 
Eh W 的 凸 狂 , 所 以 | 
WD (f (gra? + goa”) Sp Cf (a)) +e (f(a), (4.47) 
] 

注意 , 通过 规定 到 (十 ce) = +00, 定理 4.12 TT LP FEB RY E 
WER AAY 了. 

图 4.2 中 出 现 的 函数 之 一 是 分 段 线性 函数 、 注 意 到 线性 函数 
是 凸 函 数 , 并 利用 下 列 定 理 , 可 以 证 明 这 个 分 段 线性 函数 的 同性 , 

定理 和 .13 : 

wef}, iET, 表示 有 限 个 或 无 限 个 R LEAH A, 对 每 
TER, 定义 这 个 总 体 的 点 式 上 确 界 如 下 . 

F(z) =sup f(a), (4.48) 


w 了 了 是 一 个 凸 函数 ， 
【证 明 】 ,的 上 图 象 者 是 凸 集 , 由 定理 4.2, 所 有 POX 
en. 根据 定义 ,有 
[IP= le, WwER", aER, ViEI 有 f(s) <a}, 
(4.49) 
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这 样 我 们 得 到 

A Pf) ={la, owE R", aC R, sup f(e) =f (x) <a}, 

(4.50) 

所 以 了 是 一 个 凸 函 数 . 3 

我 们 已 经 看 到 , RY 上 每 个 凸 函数 了 能 够 联系 中 中 的 一 个 
Mae PCF). Pte shi avi ap i, BPR BR 中 的 是 集 , 通过 取 它 
的 “下 部 轮 亡 ”可 以 构造 出 天 上 的 凸 函数 ， 注意, ARLE 
确 界 规定 为 to, 


定理 4.14 
设 0 是 启 个 中 的 一 个 凸 集 ,对 每 个 CER, Sf ERA 
f(z) =inf{a:a€E R, (£, a) € 0}, (4.51) 
则 了 是 E ELAN. 


[证 明 ]】 我 们 必须 证 明王 ( 力 是 凸 集 ， 设 (wen Aa, a’) 
是 卫 (f) 中 任意 两 点 ， 由 站 的 定义 可 知 ， 必 存在 dw Ba? <a? 
使 (mo EC Ra, a) EC, NAC RMR, A451, 对 每 个 
9 我 们 有 


Flat + ge?) Kpa qua® < go + qua, (4.52) 
所 以 (gv! 十 goer’, qatga EPF). J 
$l 4.2.2 
设 避 是 开 单 位 圆 , 即 
C={(a1, 2a): (oa)2 二 (oa)3 一 1 (4.58) 


这 时 , 由 4.51) Me R LAMAMA TRARA 4.8), 
— (1 —(@)7)74, | a] <1, 
F@>| ne ea 
下 一 个 定理 说 明 , 在 凸 集 C 上 的 函数 为 凸 范 数 的 充 要 条 件 是 : 
当 了 限制 在 C 中 每 个 线段 上 时 为 是 函数 ， 
T 4.15 
SHER Lea. MA CR CR, 由 下 
Buse SC BR ee eh REF OAS A HR, 
Pla) =f Oat (iae), (4.55) 
?1 


(4.54) 


图 和 .3 开 单 位 加 的 下 部 轮廓 


DER] 设 f 是 如 上 的 三 函数 ， 并 设 2 是 局 中 任意 
点 . 由 的 上 图 和 象 由 下 式 给 出 : 
PS) ={, w:ACR, OA, aC R, $M) <a}, 
(4.56) 
我 们 必须 证 明了 (四 eR BO at) € PCS), G, a) 
EP@), ES 
gh Aly (1—M) at, 2? = Ae + (1-29) 2?, (4.57) 
都 么 我 们 有 
FE) 一 由 人) St, (4.58) 
FH) = $0") <a?, (4.59) 
因此 (2 a) CPF), @, a) EPA); MHF PCP) AR, 对 每 
Ayo RIEA (gaz? + ga”, gua’ tga © PCP), 


因此 
Fig 4-922?) < quo? ga”, (4.60) 
HH (4.55) #(4.57), 我 们 得 到 
Fi tga) =p (quid? +s), (4.61) 


E (gA tga, qatga) CP (db), XM, 6 Ww. wet 
命题 的 证 明 是 类 似 的 , 留 给 读者 .。 ] 

读 省 可 能 已 注意 到 ,我们 还 没有 讲 到 凸 销 数 的 连续 性 容易 
~ ?2 


说 明 , 凸 函数 可 能 是 不 连续 的 ， 例如, 取 通 数 f ACMA, 
(w)?—1, s<, 
f(r) -| 2, a=, 
十 oo， a>1, 
(4.62) 
这 是 一 个 凸 函 数 ， 在 它 的 有 效 
区 域 的 边界 上 是 不 连续 的 . MO 
略 地 说 ， 凸 范 数 的 间 斯 性 只 能 
在 其 有 效 区 域 的 边界 点 上 出 
现 , 利用 四 函数 的 闭 包 运 算 , 可 
以 部 分 地 消除 这 种 不 连续 性 . Se Re 
考虑 定义 在 BR" 上 的 点 函数 KEA AE) 一 Ww 一 b 的 函数 , 要 求 
对 任意 rE BR" HRA Al) <f (a), ”并 考虑 所 有 这 种 线性 仿 射 函 
数 的 总 体 ， 我 们 定义 支撑 集 如 下 : 
L(f)={(a, b):a€ R", BER, Yee E A a"a—b<f(z)}. 
(4.638) 


Fx) | 
f 0)=2 


| c1f(i)j=0 


PeRiNe COBRA, 记 作 clf, 为 
olf(lr)= sup {ow—0b}. (4.64) 


@OEnG 
显然 , WW ceR, Med f@)<f@, BRS RAM, 如 
Se f—ol f. 特别 地 ,可 以 证 明 , ERK 了 为 闭 的 充 要 条 件 是 : 
对 每 个 实数 a, 凸 水 平 集 世 :zE BY, f(x) <a} EM. 

等 价 地 说 ， 正 常 是 函数 的 闭 包 运算 直接 地 联系 着 集合 的 闭 包 
运算 .以 记号 位 表示 集合 CHA, lf 的 上 图 象 将 是 的 上 图 
象 的 闭 包 , 即 ( 见 [13])》 | 

P(olf) =P(f). (4.65) 
当然 , 上 述 关系 也 能 用 作 正常 凸 函数 闭 包 运算 的 定义 . 对 于 非 正 
常 凸 函数 ， 闭 包 运算 具有 十 分 简单 的 含义 ， 如 对 每 个 zE 尽 有 
f(@)=+oo, Mol f=f, 然而 ， 如 对 某 些 ecE RH f(a) 一 一 ce， 


* 译注， 这 里 的 原文 为 “对 给 定点 PEK MU ha) SSE ,这 与 人 63) 个 符 . 
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WN Lf) =O; 由 于 按 约定 , 空 集 的 上 确 界 取 为 一 20, 我 们 就 对 每 个 
tE Br 得 到 olf(w) = 一 oo. 这 样 , 闭 的 非 正常 凸 泡 数 只 能 是 恒 为 
tec Rao, SER Cae, 闭 的 概念 与 下 半 连 续 性 的 概念 是 等 
frag?! OL TER Me, BK EP OR PERE. 

i 4.2.3 

我 们 对 于 由 (4.62) 定 义 的 此 函数 进行 闭 包 运算 ， 因 为 它 是 正 
常 古 函数 ,我 们 只要 对 图 4.4* 中 的 上 图 象 取 “ 闭 包 这样, 我 们 
得 到 了 的 闭 包 为 

(zm)2—1, ex1, ` 
alf=| +o, >l, Cy) 
并 且 
ol f (1) 一 0. (4.87) 
换言之 , 此 例 中 的 闭 包 运算 降低 了 在 它 的 有 效 区 域 边 界 上 的 值 ， 
直至 该 函数 在 ED(f) 上 变 为 连续 . 1 

正如 我 们 刚刚 从 一 个 简单 的 例子 中 所 看 到 的 ， 凸 函数 的 闭 包 
运算 消去 了 在 有 效 区域 边 界 点 的 某 种 不 连续 性 . MHIP 
ED( 肪 内 部 的 每 一 点 上 是 一 致 的 ， 其 原因 是 凸 函 数 在 它 的 有 效 区 
域 的 内 部 是 连续 的 ， 这 一 点 读者 也 许可 以 狂 得 . 在 叙述 和 更 一 般 
的 结果 之 前 , 我 们 叙述 一 个 非 空 凸 集 的 相对 内 部 的 概念 . 

SRR 中 具有 如 下 人 性质 的 子 集 召 HERRAR s 
CBRE RAG o, BA art (1-a) EB, RATER 
集合 称 为 仿 射 集 *， 单 个 点 、 直 线 及 超 平 面 是 R" 中 仿 射 集 的 例 
子 . 设 已 给 一 个 是 集 OCE, 包含 C 的 所 有 仿 射 集 之 交 称 为 0 的 
仿 射 包 ， 将 C 看 作 它 的 仿 射 包 的 子 集 而 确定 的 CHAR, 称 为 C 
的 相对 内 部 , 以 riC 表示 ， 

i 4.2.4 

BEa<b, 考察 点 (a, 0) 5 b, 0) 之 间 的 线段 构成 的 凸 集 OCRs 
即 

C= {(a%, 0) axr <5}, (4.68) 
"HE RAS. 
?4 


如 果 我 们 将 C 看 作 RH FH, C 将 没有 内 部 , 因为 不 能 在 C 中 找 
BR? 的 开 超 球 . 当然 , C 的 仿 射 包 为 下 个 zw“ 轴 {( 一 维 ), C 的 相 
对 内 部 为 

TiO ={ (m, Oia <z <b}, (4.69) 


它 正 是 把 C 看 作 % TE CHAM. J 

ER, 4ORCCR Hn, RARER 中 的 正方 形 或 R 
中 的 立方 体 时 ，C 的 仿 射 包 就 是 如 本 身 , 所 以 C 的 相对 内 部 与 CO 
的 内 部 一 致 . 

以 下 两 个 定理 的 证 明 ， 需 要 另 -- 些 折 扑 中 的 概念 以 及 凸 集 和 
此 函数 的 进一步 性 质 , 这 些 并 不 直接 与 我 们 研究 的 主题 有 关 .， 因 
为 这 样 的 缘故 , 我 们 在 此 只 叙述 这 些 定理 , 有 兴趣 的 读者 可 在 [413] 
中 找到 证 明 . 

下 面 的 第 -一 个 定理 涉及 某 种 非 正 常 凸 函 数 ， 这 种 凸 函 数 或 着 
到 处 到 值 十 ce， 或 者 在 其 有 效 区 域 的 基 些 点 取 值 一 cc. 

定理 4.16 

设 了 是 一 个 非 正常 凸 画 数 ， 则 对 于 它 的 有 效 区 工 的 相对 内 部 
的 一 切 «, 均 有 Je) = 一 ce， 

我 们 现在 级 述 一 个 主要 结果 , CE T AORERE D A 
数 必 定 连 续 的 结论 , 例如 , wy BGT, 5], 

定理 4.17 

一 个 曲 函 数 在 其 有 效 区 域 的 相对 内 部 中 总 是 连续 的 ， 

由 此 定理 , 我 们 立即 就 有 下 列 推 论 . 

推论 4.18 

Re 上 的 实 值 凸 函 数 必 定 处 处 连续 . 

在 本 节 的 结束 部 分 ， 我 们 利用 前 面 给 出 的 关于 凸 集 的 分 离 定 
H, 来 证 明 含有 出 函数 的 不 等 式 组 的 解 的 存在 性 的 某 些 结果 .下 
列 结 果 属 于 Fan, Glicksberg 和 Hoffman™, 

定理 和 .19 


B fo s fm 为 正常 是 函数, EAM ROCOED CF), MFA 
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个 局 情况 中 恰 发 生 一 种 情况 : 
(i) 存在 一 个 EO, 使 


Fie) <0, i=l, ++, m, (4.70) 
(ii) 存在 不 全 为 0 的 非 贷 数 a, …， an, 使 对 一 切 s$EC, 均 有 
Šia file) 0, (4.71) 


【证 明 】 REG) a. PR a> 0 的 任何 非 负 数 
CH，"… Amy 可 得 
Siafi) <0, (4.72) 
因此 (让 不 能 成 立 ， 
”现在 假设 眉 不 成 立 . $ 
Y={y:yE R", ISEO i file) <y, i=l, +, m}, 
(4.73) 
这 样 , 每 个 WE 至 少 有 一 个 正 分 量 ， 因 为 f; BER ABH, 集合 
是非 空 和 的， 进一步 还 可 以 证 明 它 是 一 个 凸 集 . EY yey 
Ree, EC 使 
I@)<y, filo) <y?, i=l, =, m, (4.74) 
则 对 任何 权 向 量 g RITE +ga EO, 并 是 ， 
六 (ao +92") Safi (2) +¢ofi(a*) < qo go, 


i=1, =, m, (4.75) 
这 样 , (aytay EY., BNCE" 为 非 正 象限 ( 它 是 西 集 ), 即 
N= {y:y€ R", y<0}. (4.76) 


集合 了 和 六 是 两 个 非 空 的 互 不 相交 的 凸 集 ， 由 定理 4.7， 必 定 存 
在 一 个 超 平面 来 分 离 它们 : 这 样 , 便 存在 一 个 非 零 向 量 wxE RY 及 
一 个 实数 5, 使 对 任何 yE 了 ， 有 


Sag.>b, (4.77) 
而 对 任何 YE N, 有 
5 ay, <b, (4.78) 


AB bt ay, <0, RY a} E y= f0, oa 0, Ue, 0, ee OVEN, 其 中 Yr Fes Tt 
HJ, BERIK, (4.78) BRR. 这 就 是 说 ,对 所 有 i=l, ---, m, 
HE a0, HH OSO, MAP ree, Ayh FRE: 


y=fi(este, t=1,--, m, (4.79) 
其 中 是 一 个 任意 的 正 数 . 于 是 YE 了 7， 且 
Saifiln) + Saver b30, (4.80) 
四 此 对 一 切 xz 和 C， 均 有 
Safi) 20, (4.81) 


故 ( 这 成 立 ， 了 
Hoeckafellazas 用 例子 说 明了 : 条 件 COMED) BE WIFE 
较 弱 的 形式 , WT ERE eH. 
— (s)? x=0, 
BORG aa 
falo) =%, 
而 C=R， 可 知 不 存在 zEC 使 产 (o) <0 Afal) <0， 同 时 也 不 
存在 不 全 为 0 HERZ a 和 oa E afie) tafa) >00 对 一 切 
ZEC 成立. 这样 二 与 位 ) 均 不 成 立 . HERE ED (fs) N ED (fs) 
为 非 负 象限 ,而 C 不 包含 在 其 中 . 
对 定理 4.19 可 以 作 许 多 进一步 的 推广 其 中 之 一 可 看 作 
Farkas 引 理 ”的 推广 形式 , 在 本 章 的 后 面部 分 也 将 是 有 用 的 . 
ER 4.20 


PELE fo, Faye Sn TE MER EULER CCL ED (FO. 
AUF IAG RAE ATR EO, 


Jols) <0, (4. 82) 

fila) <0, i=l, =, m, (4.83) 
BN, PREDE, ii | 

fr) <0， i=l, ++, m, (4.84) 
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那么 , 或 者 对 一 切 ceo HA 


fo(x)=0, (4.85) 
RA ETERS A O MARA a1, e, Om, 使 对 一 切 2EC 均 有 
fole) +3 af, (a) =O, (4.86) 


GEW) 如 果 (4.82) 与 (4.83) 在 0 中 无 解 ， 那 么 (4.82) 与 
fie) <0, i=l, e, m, FEC 中 也 无 解 。 根据 定理 4.19， 必 存在 
不 全 为 0 的 韭 负 数 Ao Aas c+, Aw 使 对 一 切 wEC 有 

hoFolan) +$ Aefila) =O, (4.87) 
不 失 一 般 性 , 我 们 可 设 No 十 十 … 十 hm 一 1， 如 No 一 1, 则 (4.85) 成 
SE. MO<Ao<1, 将 (4.87) 式 除 以 h， 并 对 5 一 e, m, Say 
一 /ho， 则 (4.86) 成 立 . 


Shafi (a) >0, (4.88) 
由 于 9EO 满 足 (4.84)， 放 (4.88) 只 能 在 入 一 0, =, 和 一 0 时 成 


立 。 这 便 与 入 不 全 为 0 相 予 盾 . 也 就 表明 , ho 一 0 的 情况 不 会 发 
Æ. 1 


4.3 DAKARE 
在 本 节 的 开头 部 分 , 我 们 回忆 一 下 实 函数 微分 中 的 一 些 概念 ， 
并 用 之 于 凸 函 数 . 我 们 将 任何 向 量 yE Be 看 成 一 个 方向 、 设 实 
RR S EXER PRS E, 点 到 在 8 的 内 部 , 则 了 在 中 洛 方 
向 9 的 导数 , 或 者 说 , 了 在? 沿 方向 y 的 方向 导数 定义 为 


Df (a; -lm LEA FO) (4.89) 


这 里 假定 上 述 极 限 存在 . 

这 个 定义 的 直接 扩充 如 下 ， 设 于 为 定义 在 BR" 上 的 任 一 函数 ， 
BUR AED RRRA. 设 ?是 一 个 点 ,， f(z) 在 xo 取 有 限 值 , 又 
Bey 是 一 个 方向 . S EP 沿 方 向 Y 的 右 侧 导数 定义 为 
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D+ f (@; y)=lim Jea (4.90) 
这 里 假定 上 述 极限 存在 ， 也 包括 极限 为 +00, 又 ->01 表示 1 经 
过 正 数 趋 于 0 类似 地 , fE ua y 的 左 侧 导数 定义 为 


对 y=0, 了 2 0) 4 D fe ; Sines 0. 
读者 容易 验 明 , 必 成 立 


一 有 0 —y=D fa, y). (4.92) 
如 对 某 个 9 Ry 成 立 着 
Dtf (a; y) =D f(a; y), (4.93) 


则 便 有 在 (4.89) 意 闵 下 的 方向 导数 . 设 y= (i, 0, e, ODER, 
N SE B oy 的 方向 导数 正好 是 弛 (49)/8my， 中 了 对 于 的 偏 
FSR. 类似 地 可 得 了 关于 x3,，…, MBSR. 如 果 函 数 在 
ATD, M SE 滑 -- 切 方向 y 的 方向 导数 是 有 限 的 ， 且 由 
FRA h: 
Df (a; y) =y VF a, (4.94) 
如 前 ， 这 里 Wf (a) A S ABE TE 2° BTA. EBERT K 
数 的 方向 导数 的 第 一 个 结果 之 前 ， 和 希望 读者 回忆 一 下 正章 次 的 报 
a. SER 上 的 通 数 ,如 果 对 每 个 ER 及 正 数 # 均 有 
f(z) =), (4.95) 
WW RK Ff (a) 为 正 齐 次 ( 民 WH. 
定理 4.21 
KEP ORR, sE R, Ac HH fORAAR, WSF 
4 沿 任 何方 向 Y As A aS Ze SE TE, oh, DPF 
DfevyHEAKABR, E 
Df (a, y> Df y). (4.96) 
; DEM) i PER A SN ARE FE AR, EX ACY) 
=f ty) fa., BA PAAR 已 ( 力 平移 而 得 ， 所 以 天 
Bh ew, HRA AO)=-0, R >>, Ba=h/h, m= 
79. 


(ta~t) /to, 于 是 qn>0. a> O H. 1 十 qs 二 1， 所 以 得 到 
hi gitay +920) = hy) S gh liy) +g), (4.97) 
Ahy) chy) (4.98) 


1 ty 
上 上 述 不 等 式 表明 Cty) /t Fe E> 0 SE RK, Am ETE (4.90) 
HARRE oO 的 非 减 函数 . HE, KP ORS, 我 们 能 对 每 
个 y 写 出 下 式 : 
Df (a; y) int Lt ty) Fle) ， (4.98) 
SAM D*f (a; 四 必 存 在 (虽然 它 可 能 不 是 有 限 的 ). 因为 D+f (a?; y) 
对 每 个 y FEE, HA (4.92) A Df (a; 力也 对 每 个 8 存在 ， 设 和 
Fe — PIER, 则 
Dtf (a, ay) —lim Mf ett) | (4.100) 


=ADt fia"; y), (4,101) 
因此 DF 是 正 齐 次 的 .对 DF, 同一 事实 也 正确 .出 齐 次 性 质 可 
知 DHF; 0) = D-f (a, 0) —0. 
FRIE D FÆ y hin. He (y", o' DEP CDS), 
Cy", PE PDS), 于 是 
Df (a y*) <al < +00, (4,102) 
Dt f(a; y*®) <a? <4 00, (4,103) 
由 了 的 凸 性 ,对 任意 9 A t>o, 我 们 便 有 


F (e+ tay +a") =F (5 @+ 2a") + to +2tqa7)), 


(4.104) 
或 
F(E +i + gy?) ) < > fa + Rigy) + sf (a? + 2taoy"), 
(4.105) 


注意 , 由 (4.102) 与 (4,108), 了 在 (4.105) 右 边 的 信 对 充分 小 的 

不 会 是 十 ce; 因此 不 会 出 现 不 确定 的 表达 式 oo 十 (一 eo)。 这 样 ， 

JACE. LOS) PHARMA f°), BRU 取 当 1->0+ 时 的 极限 ， 我 们 得 
&¢ 


到 
DF; qi qay) SDF (As quay) + DF (2s gy), 
(4,106) 
He (4.102) A (4.103) 4) FEL q 和 gn, FIG D* 的 齐 次 性 ， 
并 把 所 得 式 子 相 加 , 最 后 得 
Df (a? qy tq) Squal + gia’, (4.107) 
DHÉ, (ay Hgy’, qua’ tqa’) E PCDS), EE i AE HY). 
HF D'FRAEN EA y 有 
Dfl; y+ D' f(a; —y)=D*tf (a 0) =0, 
(4.108) 
四 由 (4.92) 便 得 
Df (a; yy Df; y). (4.109) 
] 
下 一 个 要 引入 的 概念 是 次 梯度 , 在 可 微 凸 函数 情形 , 它 与 通常 
的 梯度 有 关 , 在 更 一 般 的 情形 , 它 与 方向 导数 有 关 、 向 量 E€ RH 
为 凸 函 数 了 在 点 cCR 的 次 梯度 , MRM —-DyCR, WW 
Fy) >f læ) +8 ye). (4.110) 
WFP ORM, 在 某 点 xz， 可 能 发 生 三 种 情形 . (a) 没 有 向 量 使 
(4.110) 成 立 ; (b) 有 唯一 的 满足 (4.110); (6) 存在 不 止 一 个 这 样 
的 向 景 £，Rockafellar"9 已 经 透彻 地 研究 了 此 访 数 的 微分 性 质 ， 
仿照 他 的 工作 , RAW Of (a) BRM fo 的 所 有 次 梯度 的 
集合 . 次 梯度 的 某 些 基本 性 质 可 以 概括 为 : RA Of), WAAL 
的 次 微分 ， 是 一 个 闭 的 西 集 ， OF) PRE pe CCR 
TRER: MRM 了 按 通 常 的 意义 在 eTA. 并 且 ， 这 时 有 é 
=yf (e), 也 就 是 成 立 
e G2), j=l, … 
次 梯 庆 的 竺 狂 可 以 用 方向 导数 来 表征 ， 这 在 以 下 定理 中 可 以 
AH. 


h, (4.111) 


gi 


=e 4.22 
设 在 点 2 处 f(z) 为 有 限 , MAR ECR HUB SEK eH 
次 梯度 的 充 要 条 件 为 对 一 切 方 向 z 均 成 立 
Difina Diz, (4.112) 
【证 明 】 REA SE OMAK, FRE WEE.) $ 
% 一 上 十 好 ， 这 里 所 是 一 个 正 数 , 这 样 , 对 每 个 eR 及 t>0 均 有 
f(z+tz) Sf (x) +E, (4.113) 
将 (4.418) 两 边 除 以 二 并 重新 排列 , RINE ER R> © 
得 到 
fete) -f (x) Ete, (4.414) 


注意 Df (a; 2) 是 (4.114) 中 差 商 的 下 确 界 ， 便 得 不 等 式 (4.112)， 
相反 地 , 如 果 (4.112) 对 每 个 x€ R* 成 立 , 则 利用 相同 的 论证 , 可 知 
(4.118) 也 成 立 。 因 此 , (4.110) 成 立 , 这 就 表明 是 了 在 4 的 次 梯 
BE. | 

由 上 述 两 个 定理 , 我 们 有 以 下 推论 . 

#7 4.23 - 

BHR EAB, HR @)AAM. Wx —WyCR* 
HA 


fifle) +D*f le, y—e). (4.115) 
特别 地 , WR S E L 可 微 , 则 
fF le) + (y-er) VF (2), (4.116) 
这 个 推论 的 证 明 留 给 读者 . 
推论 4.24 
REP LHR, 并 设 了 C2) 和 了 C9) 为 有 限 ， 则 成 立 
D*f(y; y—2) SDtf (a, ys), (4.117) 
和 l 
D f(y; y-2) >D fla; y~), (4.118) 


特别 地 , 如 果 了 在 = 和 4 为 可 微 , 则 
(人 一 2 ivf (u) — vv) 29, (4.119) 
8a 


【证 明 ] HIG 4.23, 我 们 有 i 
Fa >f fla ye), (4.120) 


fafau) + Df sy), (4.121) 
这 和 便 得 到 . 
-Dtf ly; o-y) >D f y-o). (4.122) 


FEID SR 4.2, 有 
DF: y—a) 2D f y—-a) = -D'Y s—y), 
(4.123) 
所 以 得 到 
DY (ys y-2)>D*f (a; y-a), (4.124) 
关于 左 侧 导数 的 类 似 结果 的 证 明 是 相同 的 。 ] 
定理 4.5 表明 , 函数 了 在 到 上 的 凸 性 等 价 于 将 它 恨 制 于 R 
由 任何 直线 段 时 的 西 性 ， 因 此 , 在 某 些 情形 , 只 需要 研究 在 实 直线 
丸 上 的 凸 函数 的 性 质 。 从 另 一 角度 米 看 ,这 种 研究 也 是 很 吸引 人 
的 ,因为 与 多 维 情形 比较 起 来 , 它 的 结果 往往 相当 简明 ， 例 如 , 在 
ERE, FEE RL, 了 在 点 4 的 所 有 右 便 和 左 侧 导数 能 
够 相应 地 由 Def (a, 1) 与 D-F (zs 了 算得 , 这 是 因为 可 以 利用 这 些 
导数 的 齐 次 性 质 ， 现在 ， 我 们 要 阐明 这 些 导数 是 关于 z 的 单调 非 
RER. 
定理 4.25 
BSE R AGM, HRS M a te SOMS) 
AARMA, ator, MRY 
DF, DSDS; D>D'f e; 1)>D le 1), 
(4.125) 
[证 明 】 上 述 第 一 个 不 等 式 和 最 局 一 个 不 等 式 从 定理 4.21 
即 可 得 到 、 中 间 一 个 不 等 式 可 以 从 以 下 关系 式 中 得 到 
DA NaL aL) 2 LL) Df @s 1), 


(4.126) 
o] 
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| 4.3.1 
为 了 说 明 至 此 已 得 的 概念 和 结果 , BEE R LATI h 
pa: 
+o, 2 之 一 1， 


2, a=—t1, 

f(@)=4 (2), -1<2#<0, (4.127) 
T, 0<r<l, 
+o, 1l1<w. 


利用 右 侧 导数 和 左 例 导 数 的 定义 ， 并 注意 它们 可 以 相应 地 由 
Dtf DAD fla 一 1) 算 得 ,我 们 得 到 
| 无 意义 ， 2<—I, 


—o, 4 一 一 省 
2a, -1l<#<0, 

D*f (a; 1) = 1, ee ae (4,128) 
+, g=i, 
ERX, lc, 

各 

无 意义 , <-i, 
一 ceo， g=—l, 

Dfe 1)=4 2, ~—-1<2r<0, 4,129) 
1, Oces, 
无 意义 , iar. 


我 们 可 以 看 到 ,对 一 1<w<0 及 0<z<1, 有 Dt*f(x;1)= Df (2; 1), 
而 对 z=0 和 «=1 有 D*f(z; 1)>D-ftw; 1)， 由 定理 4.22, ME 
是 了 的 次 梯度 的 充 要 条 件 为 : 对 一 切 z€ 怠 , 成 站 
Dif (a, 2) Ez, (4.180) 
又 因为 单 侧 导数 是 正 齐 次 的 , 我 们 得 到 
zD*f (2, 1), z>0, 
D* fla; 2) =< 0, z=0, (4.131) 
L —2D*f (æ; — 1), 2<0, 
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根据 上 述 两 个 关系 式 , 我 们 可 以 得 出 ,《E AF) SRF 


D'f(a, DeésedD fia, L). (4.182) 
所 以 有 
rø, ax —i, 
| 2x, -i1<2<0, 
€: 0<€<1}, =, 
Of (x) = . gst} eae (4.133) 
{§: €>1}, s=], 
ø, l<a, ] 


在 以 下 一 些 结果 中 ,我 们 将 限于 注意 实 值 的 可 微 凸 函数 . 这 
些 结果 中 的 大 多 数 可 以 推广 到 按 $4,2 开始 部 分 所 述 的 广泛 意义 
下 的 凸 函 教 ， 推 广 时 要 用 到 单 侧 导 数 ( 右 侧 和 左 侧 ) 以 及 次 梯度 这 
些 较 一 般 的 概念 . 然而 , 这 种 更 为 -- 般 的 结果 的 证 明 , 往往 变 得 相 
当 复 杂 ， 这 是 由 于 需 涉 及 到 所 考虑 的 函数 在 有 效 区 域 边界 和 外 部 
的 性 质 ， 由 于 这 个 原因 , 我们 在 本 节 的 其 余部 分 决定 损失 一 些 一 
般 性 来 提出 这 些 结果 ， 然而 , 有 兴趣 的 读者 只 要 在 难 捉摸 之 处 注 
意 一 下 就 能 扩充 这 些 结果 . 
定理 &.26 I 
假设 f 是 开 区 间 DOR ERKAT, WA, HERS S 
为 五 上 凸 函 数 时 ,了 的 一 阶 导 数 尹 为 卫 上 的 非 减 函数 ， 
CE) SAO, HEM 4.25 即 推 得 结论 ， 现 在 , 设 
OE Dw ED, whaa, HGe =p tga, WPA, 
有 
fe) =f) gw aT), eee, (4.184) 
f(a) =f (a) galaa, aat, (4.185) 
当 拓 是 REAR RB, 我 们 就 有 
FESSA) Hala E), (4.136) 
15 (4.186) REL g, KIBARA 一 ges， 再 加 起 来 ,得 到 
gf (a*) ~ gaf (0) <a f(a") — gsf e), (4.137) 
A5 


Pp 
F SaF) HgS (0), (4.138) 
这 就 表明 , 了 是 一 个 凸 函 数 . 1 
至 此 建立 的 大 部 分 微分 学 的 结果 都 是 凸 函 数 的 必要 条 件 ， T 
一 定理 表明 , 在 可 微 凸 函数 的 特殊 情形 中 , 这 些 条 件 作 为 充分 条 件 


也 很 容易 证 明 . 
定理 4.27 
UES AE Br" 上 的 实 值 可 微 函 数 ,车 对 任何 两 点 7€ BY, oe R’, 
有 
FASS) + (a2) VF (a), (4.139) 
则 了 在 BR" 上 是 后 的 . 


【证 明 】 eo Ma? BRERA, He t= atga, 
于 是 有 


f(@) =f (2) Agla —2*)" Vf (2°), (4.140) 
f(t) Sf (a) +912 27) VF), (4.141) 
分 别 用 9: 和 ga 乘 (4.141) 和 (4.140), 再 加 起 来 , 我 们 得 到 
df (a) + Gof (a?) 站 os)， (4.142) 
从 而 了 是 了 凸 的 ， 了 


推论 4.23 AEM 4.27 具有 简明 的 几何 意义 . RP E 上 的 一 个 
可 微 画 数 为 凸 函 数 的 充 要 条 件 是 : 在 点 2° ft] Taylor fe FF st AI 
前 二 项 , DRED on F RFE Re. 

F(a) + aof (2), (4.143) 
对 和 任何 ZE Br 均 小 于 等 于 f(z). 

下 一 定理 涉及 上 监 冰 数 的 一 阶 偏 导 数 的 连续 人 竹 . 这 个 定理 的 证 
明和 需要 其 他 背景 材料 ， 因 此 予以 省 略 。 有 兴趣 的 读者 可 以 参考 
Fenchel!, Rockafellar™* ng Stoer, Witagal]™)_ 

定理 4.28 

设 了 是 开 凸 集 CCR LHRH AEC LAR, W 
了 在 C 上 必 有 连续 的 一 阶 偏 导数 . . 

在 结束 本 节 时 , 我 们 引入 关于 二 阶 可 微 凸 通 数 的 一 些 结果 . 
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定理 4.29 
B FENKE DCR LARCH he, N SÆ DEA 
函数 的 充 要 条 件 为 ,了 的 二 阶 导数 了 " ERT CED LAERE 
负 的 . 
【证 明 】 由 定理 4.26, 了 在 也 上 为 凸 函 数 的 充 要 条 件 是 产 
HERAA, 也 就 是 , WEP ee DA f"), ] 
ME, 我 们 将 上 述 结 果 推 广 到 多 维 情形 . 
定理 4.30 
设 了 是 开 凸 集 CC 可 上 的 一 个 实 信函 数 , 它 具 有 二 阶 连续 偏 
导数 , 则 了 是 C 上 凸 函 数 的 充 要 条 件 为 ; EBT CCD 算得 的 了 的 
Hesse 阵 是 半 正 定 的 .这 也 就 是 说 , 在 每 个 XED, 对 一 切 YE Rr’, 
我 们 有 
ay Of (a) y=, (4.144) 
GEH) HÆ 4.15, BHR fE 上 西 函 数 的 充 要 条 件 为 : 
MEM CC, EC, MH 
PA) =f (art (1—-A)a@*) (4.145) 
XP LS ASO 为 凸 函数 . HEM 4,29， 上 述 条 件 等 价 于 ; 函数 
tt os Si S T-L lr? mies 
P'a) = 3) $i a-a ap Sie Pave) 
(4.146) 
Mt ey CO, 27 CC MO<KAKI WHER, Syer, 因为 
2 一 NO 十 (1—A) 27 EC, 我 们 可 将 (4.146) 改 写 为 : ME fe yE R" 及 
wE0, 成立 


n n g (æ) 3 i 
2 2 v Foe, (4.147) 
了 


这 里 列 入 一 点 注意 事项 ， 将 定理 4.80 中 “ 半 正 定 一 词 改 为 
“正定 ”, 这 个 定理 不 能 整个 地 加 强 到 严格 凸 函 数 的 情形 。 事实 上 ， 
读者 容易 找到 Hesse 阵 不 是 正定 的 严格 是 函数 的 例子 . 

然而 , 相反 情形 的 状况 要 好 些 , 这 就 是 说 , 在 定理 的 假设 之 下 ， 


&7 


正定 Hesse PEW E 2a TARA OE. 关于 这 些 论点 的 透彻 研 
Fe, 读者 可 参见 [4]. 


4.4 DARHA 


早已 指出 , 止 冀 数 及 其 推广 在 非 线性 规划 中 起 着 主要 作用 ,加 
一 数 的 根本 重要 性 在 于 下 面 概述 的 某 些 基本 性 质 . 
定理 4.81 
设 了 是 到 上 的 正常 凸 函数 , WS 的 任何 局 部 极 小 值 点 必 蚌 了 
在 襄 上 的 一 个 整体 极 小 值 点 ， 
【证 明 】 Ro" 是 一 个 局 部 极 小 值 点 , 那么 对 于 充分 小 的 邻 
域 Ws;(w") 中 的 一 切 w, 均 有 
ORALA (4.148) 
令 z J RPE A, MIA A, O<A<1, RAC- Aa" 
+42) ENslw")， 从 而 
feie tafl". (4.149) 
由 于 了 是 正常 凸 函 数 , 有 
CL—A) F(a") AF Ce) SFC —A)a* +22), (4.150) 
将 上 述 两 个 不 等 式 相 如 , BORDA, RAED 
fz) fw"), . (4.151) 
这 就 是 说 , 0 是 一 个 整体 极 小 值 点 ， J 
假设 在 83.1 中 定义 的 问题 (P) 中 ,函数 gs, e, on BHM 
数 , Mia, oy ho 皆 为 线性 函数 , 于 是 ， 能 行 集 I 是 一 个 是 集 ， 如 
果 要 极 小 化 的 目标 函数 是 一 个 正常 凸 函 数 ， 我 们 可 以 定义 一 个 新 
的 目标 函数 如 下 : 
fæ), «EX, 
f) -{ +œ, ëZ, 
并 且 , [OBER 上 的 正常 凸 函 数 ， 它 与 下 在 不 ERWA. 根 
据 前 述 定理 我 们 得 出 , 了 的 每 个 局 部 极 小 信 点 也 是 一 个 整体 极 小 
值 点 , 或 者 说 , 如 X 非 空 , fF ERA CE X 达到 的 任何 局 部 极 小 也 
是 了 在 整个 X 的 整体 极 小 . 
$5 


(4.152) 


定理 4.32 

mf R EWE OBR Fit AcE 是 一 个 凸 集 , WE 
ze 马达 到 的 任何 局 部 极 小 必 是 了 在 整个 并 上 的 整体 极 小 . 

注意 , 一 般 地 , 凸 函 数 的 极 小 值 可 以 在 多 于 一 点 处 达到 .我们 
现在 要 证 明 ， 一 个 正常 凸 范 数 的 极 小 点 的 集合 必 是 一 个 凸 集 ， 首 
先 , BAVA FBG 

引 理 4.38 

设 了 是 Br 上 的 贞 瑞 数 ， a 是 一 个 实数 , 了 的 水 乎 集 定 义 为 

SOG, a={e: 26 R", f(a) <a}, (4.153) 
则 对 任何 a, SCF, OH AR, 
【证 明 】 BEES, OMPESF, a). 于 是 便 有 
Fig + goa?) S91 f(a") + gaf ) (4,154) 
qt gr =, (4.155) 
所 以 S(f, AELE. J 

定理 4.34 

设 了 是 瑟 上 的 凸 函 数 ， 则 使 地 达到 极 小 伪 的 点 的 集合 必 是 
凸 集 . 

DER) eo 是 子 在 极 小 值 点 的 值 . 于 是 , BAe: ce BP, 
f(z) <0 HR RAR MEN MRA, 由 上 述 引 理 它 必 是 一 
个 目 集 ， 了 o 

另外 一 个 结果 在 某 些 应 用 中 也 十 分 重要 ， 在 这 里 提出 是 值得 
的 . 

HE 4.35 
设 了 是 严格 西沙 数 ， 它 定义 在 凸 集 节 CR" E. MRSEX 
上 能 达到 它 芍 极 小 值 , 则 它 必 在 X 的 唯一 点 达到 . 

【证 明 】 假设 极 小 值 在 两 个 不 同 的 点 达到 ， 这 两 个 点 是 
DEX PEX, HES) =f) =a, Hew 4.34 可 知 对 
任何 g RANA Sa +ga) =a, KRESS HMMS. J 

在 许多 应 用 中 , ROR A Pe AN UMAR, 人 们 就 去 找 
出 丽 数 的 去 留 点 一 一 使 梯度 为 0 的 点 . 在 凸 函 数 的 情形 ， 这 种 处 
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理 能 被 证 明 是 完全 正当 的 ， 
定理 4.36 
假设 了 是 一 个 凸 函 数 , 那么, 当 且 仅 当 了 在 达到 极 小 值 时 ， 
AVE af (2"), 
【证 明 】 由 次 梯度 的 定义 ,0E Of (a*) StF — Wye RB" 成 
BY 
FD >f), (4.156) 
也 就 是 说 , 2" 是 了 的 一 个 极 小 值 点 ， ] 
推论 4.37 
WER 上 的 可 微 四 函数 , 那么 , 当 且 仅 当 了 在 呈 达到 极 小 
值 时 成 立 
Vr(o) 一 0. (4,187) 
[证 明 】 当 且 仅 当 了 在 v2 可 微 时 , 8f(z) 一 TvF(z)}， 所 以 这 
个 推论 是 上 述 定理 的 直接 结果 .， J 
WRB RRS ETI UR XR, mE oS IX, 则 上 
述 推论 一 般 仍 保持 正确 . ER, 在 寻找 是 函数 的 无 约束 极 小 
时 , 在 梯度 为 0 的 点 不 需要 再 检验 二 阶 条 件 ， 当 然 , 这 个 结论 也 能 
从 定理 4.30 推 得 . 


4.5 凸 规划 的 最 优 性 条 件 


这 里 我 们 考察 凸 规划 ， 它 是 第 3 章 中 引入 的 一 般 非 线性 规划 
问题 4E) 的 特殊 情形 ， 那 里 所 导出 的 最 优 人 性 条 件 对 于 凸 规划 来 说 
人 下 面 , 就 考察 下 列 称 为 凸 规划 的 非 线性 规划 ， 


OP) min f(s} (4.158) 
Sa FAR 
g(z)>0, i=l, ++, m, (4.159) 
hy(z)~=0, j=l, =, p, (4.160) 


其 中 是 R 上 的 正常 凸 函数 ，% 是 正常 四 阔 数 , h 是 下 列 形 式 的 
PRE CD Ht) R He: i 
hj(@) = È Tinta ~ by, _ (4.161) 
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这 样 的 规划 所 以 被 称 为 凸 规划 , JD iw, JEE 
足 (4.159) 中 不 等 式 和 (4.160) 中 等 式 的 所 有 ER 的 集合 是 一 
个 而 集 ( 见 练习 4.Q)， 注 意 , 一 般 地 , 当 记 是非 线性 的 是 函数 或 加 
函数 时 , 满足 方程 Ma) 一 0 的 点 ERY 的 集合 不 是 一 个 册 集 . 

我 们 现在 要 表明 , 加 以 可 微 性 的 适当 假设 , 定理 3.8 中 叙述 的 
关于 最 优 性 的 Kubn-Tucker 必要 条 件 ,用 于 是 规划 时 也 是 充分 条 
件 . 

定理 4.38 

假设 函数 了 和 gs, s gm 分 别 为 R ESE HY ee Be Be A 
四 函数 ， 并 设 加 ，…, hh BRERA, BEREAN, u, HE 
HH os” 满足 {4,159) 和 {4.160), EaR 

Vi (2") N vale") -3 pivh,(2")=0, (4.162) 
Alga") =0, 4=1, rer, M (4.163) 
A‘ 0, (4,164) 
WI a” 是 (OP) 的 整体 最 优点 . 
[证明 】 设 “是 满足 (4.159) 和 (4.160) 的 任 一 点 .于 是 
FOSSE) -ÈN ga) wihy(@), 4.165) 
将 推论 4.23 用 于 f, g 和 hy JERIA (4.165), 我 们 得 到 
FOSSA) +a- Ufa") Sga) 
-ÈN æ- yg) uha) 
-$ru yha"), (4.166) 
重新 排列 上 式 , 就 得 到 
FSFE) -EN gla) =D wf (a), 


+a) [Va -En vga) — Bi uvh), 
(4.167) 
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H (4.160) (4.162) pi (4.163), 便 可 得 到 
Fafe), (4.168) 
] 

由 这 个 结果 显然 可 知 ， 在 同样 的 假设 下 ， 定 理 3.4 PRE 
Fritz John 条 件 在 中 >>0 时 也 是 充分 条 件 . 

在 一 般 情形 的 最 优 性 必要 条 件 中 所 假设 的 正则 性 条 件 (3.71)， 
在 凸 规划 中 可 以 用 更 为 简单 、 更 易 计 算 、 显 然 是 更 强 的 条 件 来 代 
替 ， 该 条 件 属 于 Slater) 存 第 3 章 中 所 定义 的 一 般 的 数学 规 
划 (P) 称 为 是 强 相 容 的 ,如果 存在 一 点 只 GE 尼 满足 

ga) > 0, i=l, =, m, (4.169) 
hy(a@?)~0, j=l, =, p. (4.170) 


在 这 些 条 件 下 ， 也 说 这 个 规划 满足 Siaier RAE. RIA FOr) 
约束 的 补充 条 件 是 : HE R BY hy (ar) = a) "a — 8; 的 系数 向 量 
ad= (an, +, Gin) 为 线性 无 关 ， 这 并 不 是 一 个 实质 性 的 限制 , 因 
为 , 如 果 系 数 向 量 之 间 线 性 相关 , 我 们 总 能 利用 对 这 些 向 量 的 初等 
代数 运算 , 在 不 改变 问题 的 能 行 集 的 条 件 下 , 使 一 个 或 阁 干 个 方程 
变 成 一 切 ce Be 均 满 足 的 方程 ! 2=0, 其 中 左边 的 0 是 分 量 缘 为 
0 的 % 维 向 量 ， 照 此 办 理 , 就 可 以 消去 所 有 线性 相关 的 约束 . 

现在 , 我 们 能 用 相当 直接 的 方法 ， 证 明 凸 规划 (CP) 的 最 优 性 
Ay Kuhn-Tucker 必要 条 件 . 

定理 4.39 

REER FA go s gm 分 别 为 R" 上 实 值 可 微 的 凸 函数 和 
HKA. 2 


hy@) = È site — by, j=l, =, p (4.171) 


而 向 量 d= (an, sey Zin), g=1, “ety 及 为 线性 无 关 ， 又 假设 问题 
(OP) 为 强 相 容 的 ， 如 果 a" COP) 的 解 ,那么 必 存 在 向 量 ?和 
= (My, MA w= (ul, +, ut), 使 下 列 各 式 成 立 ， 
VAN-E N vg- Bi ujwhy(wt)=0, (4.172) 
9a 


Mo(a")=0, i=l, +, m, (4.173) 
a0, (4.174) 
GEAL 在 关于 fg I h WERF., WEER 4.28 可 知 定 
理 3.4 的 很 设 亦 成 立 . TL A F FE b E a= (ao aa e, Am) A 
B*=(Bi, +, Bp) IE 
avj (at) È al vga") -X Bh) =0, (4.175) 
atg(a*)=0, i=l, +, m, (4.176) 
(a, 8) #0, a0, (4.177) 
WER a> 0, 4 Araia w5 Bj /oc, 这 定理 就 得 到 证 明 ， 我 
们 现在 要 证 明 , ao=0 的 假定 必 导 致 予 大. 
HE ah=0 Alai, ao #0, MBE 到 满足 (4.169) 和 (4.170)， 
TE, AT g AMAR, A 


Se alo) < a, VACS E PACE D'Sa 22: EE ) i 
(4,178) 
是 由 (4.175) 和 (4.176), 就 有 


Siig) < -| — $g; mE], (4.179) 
电 于 (线性 的 ) E Bw Be, AA 
Sat KÈ Rilhs (a?) —hy(a®)]=0, (4.180) 


便 与 (4.169) 相 矛盾 , 这 是 因为 ,车 对 于 i 一 1,…, m, A mo") >0, 
EL (ai, ++, am) 0, 则 必 有 


3} a? gila") >0, (4.181) 
MEH a =0, (EA ASO, Th (4.175), 我 们 有 
>> Bivhs(a") =0, (4.182) 
或 p 
2 Bien=0, kel, +, n, (4.183) 
=1 


这 意味 着 向 量 o 线性 相关 , MAT. 3 


在 要 结束 本 章 时 , 我 们 就 凸 规划 情形 给 出 定理 3. 扩 的 道 定 
理 . 我 们 将 证 明 ， 目 规划 的 每 个 解 必 是 它 相应 的 Lagrange 式 的 
鞍点 ， 然 而 , 还 要 先 对 定理 4.20 作出 一 个 稍微 不 同 的 变形 . 

定理 4.40 

设 gi, o, gm ZIER URA, Lh, A 是 线性 函数， 设 
COR" FEARS aK, 使 


Oc ED(g). (4.184) 

如 果 不 存 在 满足 下 列 条 件 的 wE 0， 
G2) > 0, b=1, «+, m, (4.185) 
hm) =O, g=1, +, p (4.186) 


那么 必 存 在 不 全 为 0 的 数 Ay, t, Om, fa, mets Br, X% i=i, r, M 
F w% 关 由 且 对 任何 zxEC， 有 


$i agla) +33 Biha) <0, (4.187) 


起 定理 的 证 明 类 似 于 定理 4.20 的 证 明 , 留 给 读者 ， 现 在 我 们 
有 下 列 推 广 的 Kubn-Tocker 鞍点 定理 . 

定理 和 .和 

TERK S, 91, s Jm, ht, oe, ho 满足 定理 4.39 的 假设 , 也 可 
以 不 满足 其 中 的 可 微 福 假设 ， 又 设 (GP) 是 强 相 容 的 。， 如果 sw” 是 
COP) 的 解 , 那么 必 存 在 向 量 AP = (Ai, e, A) A= Cul, +, 113)， 
ila", A, a") FE 83.3 中 定义 的 问题 (8) A, ORE, "0 H. 

Lle, A, HSL, A, uO SL, A, u"), (4.188) 

同时 , 还 满足 


No (ry) oO, i=l, =, m, (4.189) 
【证 明 】 下 列 系 统 不 具有 解 ce R, 
f@")—-f(@) >o, (4.190) 


g£) 20, t=1, ++, m, 
h(x) 一 0， j=l, “+, P. 
根据 定理 4,.20， 就 必定 存在 不 全 为 6 的 数 a>0, my 之 0, …， 


(4.191) 


a, 20, Bi, my By 使 对 任何 T, 成 立 ， 
aa( f(a") F(a) +B ego) +B) Bihi(@)<0, (4.192) 
即 
aof (a) <f) -age -S Aha). (4.103) 
设 mo> 0， 于是， 将 (4.193) 除 以 mo， 上 且 对 5 1 o, me 
入 一 atj[ao， 对 了 一 1， 0, PS p= Biaon WME CR ROE: 
f(a) ED, A, w), (4.194) 
HT oC") 0 Al Ay(a") =0, 于 是 对 任何 入 E R”, ASO RUE R’, 
我 们 有 
FE-S Agua") D shy @") = LG", &, ES), 
(4.195) 
将 we， A, p" 代入 (4.194) Ai (4.195) 4 At, RA Fa 
=L", "jp*)， 由 这 个 结果 转 过 来 便 可 推出 , H i=l, = mi 
Ago") =0， 因 此 ,在 ao>0 的 情形 , 定理 的 证 明 便 完成 了 . 
RER a 一 0、 于 是 对 任何 xE RY, A 
$: agila) +33 Brh) <0. (4.196) 
因为 (OP) 是 强 相 容 的 , 我们 必 有 四 一 om 一 … 一 mm 一 0. 于 是 , BHO, 
且 对 任何 wE R" 成 立 
= (Bean) me Bb (4.197) 
如 果 对 某 个 加, L<ho<p, A $) Bian, #0, BAT HT ULM a, 使 
[en | 充分 大 ， 又 如 时 选取 rx 一 0, 这 便 玻 坏 了 (4.197)， 所 以 
YBan=0, k=], =, n, (4.198) 
jel 
因为 8 大 0， 上述 方程 便 与 01 一 (an,…, Qs) 为 线性 无 关 的 假设 相 
矛盾 ,所 以 mm KEHO 1 
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A.A. 


4.B. 
各， 


4.D. 


4.3. 


4.F. 


4.G. 


4.H 
4.1. 


4.J. 


4.K. 
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CE 
用 一 个 铭 子 说 明 凸 集 的 和 集 不 一 定 为 凸 梨 。 给 出 一 些 凸 集 的 例子 ， 它 
们 的 祭 集 刘 为 凸 集 ， 
证 明定 理 4.3， 


i OCR 是 一 个 卫 集 ,证 明 下 列 集 合 X oy RR: 


X= {seize R", s=Ap, p€C}, (4.199) 
其 中 A 是 给 定 的 nxp KER, 
给 定 R" 上 的 线性 ( 仿 射 函数 
h(a) 一 GT 十 (4.200) 
证 明 它 既是 凸 函 数 , 又 是 四 函数 . 
ef LPS COR 上 活 续 的 实 得 函数 , WEI at eC Aa? CC, 均 有 
4eti ajir, (4.201) 
IER f ana. 
许多 有 名 的 不 等 式 能 够 通过 凸 性 来 证 明 、 利 用 定理 4.9 导 出 著名 的 算 
术 - 几 何平 均值 不 等 式 : 


dye a>] (Ca), (4.202) 
其 中 中 是 已 给 正 数 , m 是 任意 的 非 负数 , 满足 
$ Hat, (4.203) 
tml 


证 明定 理 4,10, 


» 完成 定理 4.15 的 证 明 . 


设 了 是 R 上 实 值 的 正 齐 次 函数 , 证明 了 为 凸 函 数 的 充 谈 条 件 是 : WE 
fi ER yE, RAE 

Fiet sft fiy). (4.204) 
设 了 是 R EASA. 证明 : 如 果 了 在 某 个 zE RRA Be 
极 大 值 , 则 对 一 切 z < R*, Fla) AWM, 
AOR ECR MRR EC Matec, cea’, (Hv Fy 
DIS Roo mart (Ae, O<A<1, 则 称 2 为 C 的 一 个 顶点， 证 明 ， 
对 于 紧 致 点 集 芒 CR", R LMS KR PRAM E H 
某 个 项 点 达到 .可 以 利用 证 列 结果 : R 中 任何 紧 致 是 集 是 它 的 项 点 
gs BH! 


å L. 


4.N. 


4.0. 


4.P. 


4.Q. 


4.R. 


Ca) 证 明 R FIER MR 了 为 闭 的 充 要 条 件 是 : 对 任何 实效 KF 
{nite R", fio) <3 RAR. 
Cb) 证 明 ; 当 且 仅 当 f AER OGRH, If HERO, 


RPE OCR 取 值 为 有 限 , BE 双 存 在 右 侧 和 左 侧 导 数 ， 


证 明 对 任何 多 有 

一 D+f(zo; 一 有 一 DCooi y). (4.205) 
iA fH, MOO), HEN. E 8f (x) 为 非 空 , 则 
Af@ =f), 设 f(z) 一 Ic], 证 明了 为 凸 函数 ; 并 对 任何 ze RY 计 
CEON 
证 明 推 论 4.28, 
设 实 值 函数 /为 


FÒ =$ PACES -$ nm È: zi}. (4.206) 
H FETIS ENGR: 
Claj={x:s € R", tate t Tn =a, t>0, a>0}, (4,207) 


又 问 : 了 还 是 严格 凸 函 数 吗 ? 
证 明 : CP) 的 能 行 集 , 即 满足 (4.159) 和 (4.160) 的 x€ RBA 
ose. 


考察 下 列 非 线性 规划 : 

(NLP) min f(s) (4.208) 

受 限 制 于 

| Ax=b, (4.209) 
a>, (4.210) 


其 中 , 了 是 R" 上 的 实 值 连续 可 微 的 是 函数 , 4 是 已 给 的 mxn KERE, 
man, b ZEH n EAR. 

求解 上 述 规 划 的 途径 之 一 是 ,寻找 一 个 w*, 既 满足 前 面 的 约束 , 又 
使 下 列 线性 规划 的 一 个 最 优 解 正好 为 y==%*: 


(LP) min f(y) =y" Ys*) - AD 
受 限 制 于 

Ay=b, (4,212) 

yo, (4.213) 


试 证 明 , WR y= 2" 是 (LP) 的 解 , 则 w* 是 (ELP) 的 解 . 
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第 9 章 


非 线 性 凸 规划 的 对 偶 性 


在 讨论 非 线 性 规划 问题 的 对 偶 性 时 ， 必 须 从 线性 规划 说 起 ， 
在 那里 得 到 了 数学 规划 中 第 一 个 和 最 完整 的 对 侦 性 结果 ， 按 
Dantzig"1， 对 偶 性 的 概念 首先 由 Von Neumann 在 1947 年 引进 
线性 规划 , 后 来 由 Gale, Kuhn, Tucker’ 表达 成 精确 的 形式 . 对 
偶 性 的 思想 是 , 对 每 个 线性 规划 , 称 为 原 有 规划 , 联系 着 另 一 个 线 
性 规划 , 称 为 对 偶 规 划 ， 对 侦 线 性 规划 有 一 些 有 趣 的 性 质 , 这 些 性 
质 不 仅 从 理论 的 观点 看 是 精致 的 ， 而 县 对 计算 方面 的 目 移 和 经 济 
学 的 解释 来 说 也 是 有 意义 的 .关于 线性 规划 中 对 侦 任 的 综合 研究 ， 
谈 者 可 参考 Dantrig" 和 Kuhn, Tucker™, 

原 有 -对 侦 线 性 规划 最 重要 前 人 狂 质 如 下 : 

1I， 如 果 原 有 规划 是 求 一 个 线性 苞 数 在 一 组 线性 约束 下 笈 极 
小 ， 那 么 对 偶 规 划 是 求 另 一 个 线性 函数 在 另 一 组 线性 约束 下 的 极 
大 ， 给 了 一 个 ( 原 有 ) 线 性 规划 ; 它 的 对 偶 是 雁 易 仅 由 原 有 规划 的 
参数 来 表示 的 .在 对 侦 规 划 中 不 出 现 原 有 变量 , RR. RA 
规划 与 对 偶 规 划 之 间 的 关系 是 “对 合 ” 的 , 即 对 侦 的 对 侦 又 是 原 有 
规划 . 

2. x — BCA J BEIT ARTIN OE RS RA, 原 有 目标 
Be (要 求 其 极 小 值 ) 的 值 总 是 大 于 或 等 于 对 偶 目 标 函 数 (MRE 
极 大 值 ) 的 值 ， 如 原 有 规划 有 最 优 解 ， WENA, Bx 
两 个 目标 画 数 在 各 身 的 最 优点 处 有 同样 的 值 ， 知道 了 原 有 规划 或 
对 侦 规 划 的 最 优 解 ， 就 能 够 得 到 另 一 个 规划 的 景 优 解 而 无须 对 它 
另外 求解 ， 所 以 ， 如 果 对 侦 规 划 在 计算 上 更 吸引 人 的 话 ， 就 可 以 通 
过 求解 对 偶 规 划 来 求解 原 有 规划 ， m l 

3. 线性 规则 在 经 济 理论 中 起 重 村 作用 .一 个 最 优 对 侦 解 可 
看 作 是 原 有 规划 的 Lagrange R THERA, 反之 亦 然 ， 很 
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多 经 济 问题 可 以 叙述 成 线性 规划 ， 这 时 对 偶 规 划 就 转 而 代表 相关 
的 经 济 问题 .线性 规划 和 经 济 学 的 关系 的 讨论 可 在 [9] 中 找到 . 

线性 规划 中 的 优美 的 对 人 惕 性 定理， 以 及 五 uhn 和 Tucker 的 
里 程 碑 式 的 文章 所 鼓励 很 多 学 者 把 对 侦 件 的 概念 推广 到 非 线 性 
规划 问题 ， 但 这 方面 早期 结果 是 不 令 人 鼓舞 的 . 昌 然 已 经 表明 ， 
可 氛 对 某 些 非 线性 规划 表述 -- 个 相应 的 对 偶 堆 划 ， 且 有 少量 相似 
于 线性 规划 的 结果 , 但 很 快 就 明白 , 为 了 得 到 有 意义 的 结果 , 只 能 
考虑 凸 的 原 有 规划 .不幸 ， 如 早期 著作 [10, 对 ,24,.86] 所 表述 的 
那样 ， 这 种 规划 的 对 偶 通 常 是 非 凸 规划 ， 且 在 原 有 规划 与 对 偶 规 
划 之 加 不 存在 线性 情形 下 的 “对 合 ”, ERE, HAHN RERS A 
划 ， ; 

六 十 年 代 后 期 , 凸 规划 的 更 完全 的 对 侦 理 论 出 现 了 , 它 的 一 般 
特征 相似 于 上 面 列举 的 藉 有 -对 倡 线性 规划 的 特征 ， 这 理论 可 循 
不 同 线索 导出 。 这 里 所 选 的 一 种 方式 是 基于 共 红 防 数 概 念 的 ,， 后 
者 由 Fenchel9* 引进 , 又 由 Rockafellar 在 一 系列 著作 中 发 展 完善 
的 ， 这 些 著作 中 的 一 些 列 在 本 章 末尾 的 参考 文献 中 .Rockafellar 
关于 凸 对 偶 性 的 大 部 分 结果 概括 在 [32] 中 .这 个 理论 是 很 新 的 且 
具有 极 大 潜力 ， 但 它 在 非 线 性 最 优化 上 的 实际 影响 还 未 被 充分 型 
解 .本章 给 出 西 规划 的 对 偶 性 理论 的 要 点 . 

按照 现代 的 方式 ， 非 线性 凸 规划 将 结合 问题 参数 的 某 种 扰动 
来 表示 . 这 种 扰动 通常 代表 规划 中 参数 的 微小 改变 ,， 从 理论 和 实 
际 的 观点 来 看 都 是 重要 的 . 例如 , 十 分 重要 的 是 要 知道 , 对 一 -个 最 
优 解 存在 、 有 目标 耳 数 的 极 小 值 为 有 限 的 给 定 前 规划 问题 , 参数 的 微 
小 改变 可 以 引起 目标 函数 值 元 限 陡 地 减 小 ， 雇 以, 除了 关于 能 行 
解 和 最 优 解 的 存在 性 及 其 特征 这 样 的 标准 问题 之 外 ， 这 种 处 理 将 
允许 我 们 研究 最 优 解 对 于 规划 中 参数 的 微小 扰动 的 灵敏 度 . 

关于 一 般 非 凸 规划 的 对 偶 性 , 可 以 说 的 事 很 少 , 因为 这 题目 差 
不 多 正 处 于 五 十 年 代 初 点 对 偶 性 所 处 的 同样 阶段 ， 这 方面 有 少量 
工作 , 如 [27,28], 结果 不 是 十 分 满意 的 . 某 些 特殊 情形 将 在 第 6 章 
和 第 7 章 中 提 到 ， 另 外 的 参考 文献 在 6.2 节 的 末尾 提 及 ， 
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5.1 # f AR 


在 上 一 章 中 我 们 定义 了 P 上 的 凸 函数 了 的 闭 包 ， 它 是 具有 
fË hie) < F(a) 的 所 有 线性 ( 仿 射 ) 函数 的 点 式 上 确 界 . 设 
h(n) =e), 我 们 可 以 问 如 下 问题 : BERR SER, dy 
当 取 什么 值 才 可 以 保证 ， 对 一 切 gE Br", h(w) 小 于 等 于 f(z)? 显 

然 ,5 必须 对 一 切 a CR" 满足 
b> E"a~ f(x), (5.1) 

所 以 

b>supts s- f(2)}. (5.2) 


除非 明显 指出 , 否则 , 上 确 界 总 理解 为 在 整个 R" 上 取 . RL 

足 (5.2) 的 8 的 最 大 下 界 是 & 的 函数 , KAS HRB, aS. 
这 样 ， 

FE) = sup {é"e—F(a)}. (5.3) 

EAE LE VE 8.1 中 看 到 ， RA RRS. 

且 在 函数 了 下 方 的 最 高 线性 函数 与 了 轴 的 交点 等 于 AHO). tk 

A E 将 相应 地 提高 或 降低 一 (8) 的 值 , HABA MT fA © 

(如 果 它 存在 ). 虽然 共 辆 郴 数 可 以 看 作 一 个 纯粹 的 数学 概念 ， 它 

却 有 明确 的 经 济 解释 . 例如, 设 制造 数量 t, g, +, Ena Kn AR 


HOi SEPA RE 
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物 的 费用 由 flw) 给 出 ， 这些 货 物 分 别 能 以 价格 所， Ea e En 出 
售 , 厂 主 的 问题 是 选择 m, e, o 的 值 , 使 得 从 出 售 这 些 沉 物 所 得 
的 利润 最 大 .显然 ， 他 的 利润 是 收入 Zi 和 生产 成 本 SC) 的 
差 ， 如 个 .3) 表 明 的 那样 ， 利 润 的 最 大 可 能 值 作为 价格 的 函数 由 
PAH. 
URNA ESE HE EE. (4.86), FY ERE 
PCP) =1E, a) SER, aCR, sup{e"e—f(2)}<a}, (5.4) 
或 
Pf) ={(€, a) :EER", ER, Fa—ax<f(e), Yee R}, 
: (5.5) 
将 上 式 与 (4.63) 比 较 , 可 以 断定 ，P( 了") 恰 是 支撑 集 L(f). 读者 
容易 验证 PP oR, RUS BBR. RINT, 
BD f* Myth ee ew ae. (5.3) 4 


f” (2) = sup {E72— f*(E)} i (5.6) 
a ee (5.7) 
T abantu nate on. vve pny {so} (5.8) 
人 (5.9) 
=c] f(z), (5.10) 

我 们 将 这 些 结果 概括 为 下 面 的 定理 . 


定理 5.1 

Bef R ba BAe, MSE OR S th Bes MH, APCS) 
=L(f). 此 外 产 " 一 elf 

容易 说 明 LP) = PCP") =Polf) Mol f= (lf), BAX 
EP ce RK, dff), RNA 

f7a— ol f (wm) > Sa —f (ax) (5.11) 

URP =A f >F. BER Asf, RAAF, f Be 
一 个 闭 凸 通 数 . 

闭 的 非 正常 古 沙 数 只 能 是 , 对 一 切 *E B", 或 者 f(z) 一 十 co， 
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或 者 f(z%) = 一 oo。 前 者 对 一 切 EE BRB', (2)= 一 co， 后 者 了 (6) 
一 十 seo， 这样, 我 们 建立 了 下 列 定理 . 

eB 5.2 

Ft Ue oF ee" 是 一 个 闭 凸 函数 . 它 是 正常 凸 函 数 的 充 要 条 件 为 
了 是 正常 凸 的 ， l 

FEE FH DK, a 是 实数 , CAR 中 的 向 量 , KA 
Ar UE RA EAT ek ASF PE AE 

Ci) 8 d(z)=f(2) +a, W (E) =f CE) —a, (5.12) 

Ci) 车 $(w)= 了 (z+z), W AE) =S E — £72, (5.13) 


(ii) # o(2)=flax), ano, WEE =È). (5.14) 

(iv) # $(@)=af(2), a>0 M pE =af (E). (5.15) 

例 5.1.1 

考虑 几 对 简单 的 共 轧 画 数 . 

(a) Kh b(a)=as—b, sE R", 首先 计算 fz) =a a HE 
函数 ， 


0, €=a, 
POEs ={ Ee 00) 
所 以 由 (5.12) 有 
+ b, E =a, 
O12 eae 


(b) 类 似 于 (a), RAT HMR, By ococR 
时 中 (2) 一 0， 否 则 四 (2) 一 十 ec, 其 中 C 是 一 个 给 定 的 凸 集 ， 这 函 
数 称 为 C 的 指示 函数 , CHRR 
g" (E) = sup £z, (5.17) 
PWA C HR MB. | 
注意 , 空 集 的 指示 函数 便 为 +0, CHW, 即 支 返 函 数 便 为 
一 co， 也 要 福 意 ,支撑 西数 是 正 齐 次 的 , 它 是 正常 凸 函数 的 充 要 条 
件 为 C 非 空 .反之 ,请 读者 证 明 ,给 了 一 个 正 齐 次 的 正常 西 画 数 , 它 
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fy ER A Oma, 
(0) BG()= fats, f(a)—a"e, sE R", 则 
JVE) =sup{ë"z—a"a}, (5.18) 
用 简单 的 微分 法 , ACTA LAR LUA = EARN, K 
PE =F ETE, 由 (5.15), HOH LE. 
—loga, z>Q, 
(0) ween, go) 一 人 or a 
W PCE) = sup {Se-+loga}, A ESO, AH stoo 时 Ex-+log x 


可 任意 大 , RIIE pE = +00; 而 对 上 <0, 用 微分 法 可 求 得 其 上 
mA, 从 而 6"(€) = —1—-log(—). 这 样 | 
—i—log (— é), €<0, 
TORI = a 
HABLHERLAGH EE HAERA. J 

Fee oe BY EB Legendre BHAT, 
fESAARE RED PCH MARR, CEED Sf) MAES 
内 部 0O 上 可 微 ， 进 一 步 设 了 的 次 微分 af 是 一 对 一 映射 。 这 等 价 
TEH: 了 是 严格 凸 的 ， 且 在 它 的 有 效 区 域 的 边界 点 附近 变 得 无 
Bre BESSY? 

在 前 面 关 于 f 的 假定 下 ， 在 每 一 点 zEO 处 ， 次 微分 Of 含有 
HAE EVS). WR Vf ANH, WEA MB VEO, 
其 定义 域 是 VE ÈR D, REF OMS. BR VSO 也 
是 一 对 一 的 ”， 定 义 

HE) TE VE — FFE). (5.20) 
WW A it D EM AAS BRA VHE =V, WCC, f(z)) 到 (了 D， 
H (E) Rake A Legendre 变换 . 
fC DCR’, (4.110), 对 一 切 y€ RF 
fa— f(a) ery fiy), (5.21) 


(5.19) 
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fa — f (x) ~anp {ey —F(y)} =f*(€). (5.22) 
KA e= VF- iE), 所 以 五 (2) 与 六 (86) 在 如 上 一 致 ， 在 关于 Vf 的 
同样 假定 下 和 C= 这 一 特殊 情况 中 ,了 是 严格 是 通 数 , 县 对 一 切 
sO 成 立 


lim £2) es, (5.23) 


FE D=R, HXH ECR A HEH, 

Bit DASE HE oH BE Legendre 变换 对 凸 函数 的 扩充 , 这 些 凸 函数 
在 扩充 的 实数 集 上 上 取 值 , 而 不 必 连 续 或 可 微 . 

在 次 梯度 和 共 轿 函数 之 闻 也 有 密切 联系 ， 这 可 从 下 面 结 果 中 
看 到 . 

定理 6.8 

ASER EBA, 则 EE83f(z) 的 充 要 条 件 为 

JE =E- f(a), 

[证明 ] (4.110), EC OF (w) HERRA 5.21) RE, 也 
就 是 (5.22) 成 立 。 了 

定理 .4 

RRR 上 的 凸 函 数 , HEA), Mecaré. ESR 
在 zx 点 是 闭 的 且 Ef E), W EC AF (az), 

【证 明 】 由 前 面 的 定理 ， 当 且 仅 当 f*(E) =E f (x) Bt 
EESE); HHRH Se) = Es FE) ee ar(O. 在 练习 
4.N 中 已 要 读者 证 明 : 车 在 到处 OETA ol F(4) = FB). 所 
LA €€ af () Aw 

ol f(x) =f") =f (æ) =E- fE), (5.24) 
从 而 cE af(E). RZ, if ERE Ef E), 则 (5.24) 成 立 ， 
即 
f'(€)=Fa-f(a), (5.25) 
从 而 E90f(z). 1】 

RTIRA HS ASE. 一般 地 说 , 在 后 函数 的 其 

轻 沙 数理 论 中 的 每 个 结果 ， 可 以 对 目 务 数 类 似 地 建立 只 要 想到 ， 
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Bg 是 目的 充 要 条 件 为 了 一 一 g 是 是 的 .特别 地 , AA 9 的 共 
HRR g" 定义 为 

P(E) =inf{e 2 一 9 (5.26) 

这 里 9* PAM Ge, CREE cg, HAAR He RRUS 
GREE. 但 是 当 f= =gh g WP RRR, 

事实 上 , 有 

=- FE) —sup{é 2—f (2)} (5.27) 

=sup{— [~ ém —g(æe)]} (5.28) 

= —inf{—o"— g(a) }= 一 久 ( 一 全. (5.29) 


最 后 我 们 注意 , XE SB AE PT aS g Bie. HE A wa Be TAY A ee LT 
那样 来 定义 ， 设 了 ERED RAR EAR 上 定义 的 任 
me, WE Re 广 由 (5.3) 定 义 , 这 是 一 个 闭 四 郑 数 , 且 是 
WE SSS RAGAS f HAAN. 换言之 , 产 是 一 个 四 
PA ASE PE, AA PCP) es A RO CO 
4.14), 对 这 样 的 任意 函数 , TT A A SSS A Re EE 


5.2 SE am Re Hy Sk PAILS 


TE RNP KTE BB Bg h pE AHE R Ae SE EE Ey SR p 
起 重要 作用 那样 ， 扩 充 到 特殊 类 型 的 非 凸 规划 问题 的 对 偶 性 关系 
Cf By EAE os OR Be Ay FE PEI RD (将 在 下 两 章 讨论 ). 
5.2 对 偶 凸 规划 


正如 前 面 已 指出 的 ， 我 们 将 在 某 种 广泛 意义 下 建立 非 线性 凸 
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规划 的 对 偶 性 关系 ， 它 将 使 我 们 深刻 地 看 到 最 优 值 对 于 规划 中 参 
数 的 某 种 扰动 的 灵敏 度 ， 本 节 我 们 将 处 理 前 一 章 引进 的 (CP) 的 
下 列 形式 ， 


(SP) min f(a) (5.30) 
受 限制 于 
g(x) =, i=1, “To (5.81) 


HP fÆ R LER ORM, ge ELMER BM. 我 
们 称 规 划 (SP) ARH IR A h A EB. 4 f g E RA, 
Geoffrion™®" 称 之 为 “ 典 则 的 ” 原 有 问题 ，Roockafellar'sa 称 之 为 " 普 
通 的 ” 凸 规 划 .， 它 与 第 4 章 表 述 的 (OP) 不 同 处 在 于 , 或 者 不 出 现 
线性 等 式 约 束 , 或 者 它们 作为 两 个 不 等 式 约 东 出现. 前面 提 到 的 
扰动 , 例如 可 以 在 约束 的 右边 引进 ， 也 就 是 , (5. 红 ) 中 的 不 等 式 可 
代 之 以 更 一 般 的 约束 

(2) uy, $=1, =, m (5.82) 
其 中 un 是 实 参 数 . A5. 32) 5.3D EA RA (SP) 的 最 优 解 
RY LA PE u WAR, R RARA E u, 考查 最 优 解 的 性 态 是 
有 意义 的 ， 包 含 一 大 类 扰动 的 更 一 般 的 规划 也 由 了 Rookafellar'e2 
研究 过 、 这 规划 可 写成 
(QP) min f(2—y) (5.33) 
受 限 制 于 

gte—y um, bel, ++, m, (5.34) 
tH YER, i=0, 1, ---, m, 是 扰动 ,它们 平移 了 与 9;, 4 如 以 前 
那样 是 约束 右 端的 扰动 .规划 (SP) 显 然 是 (QP) 4 y =0 Ai w=0 
时 的 特殊 情形 . 

用 CC 记 J 了 的 有 效 区 域 ， 我 们 用 十 面 关 系 式 定 义 如 上 的 一 个 


Bi HY oS BERR 中 
2), æ O 0, i=l, e, M, 
E {PO} 2EO Bae) 0, te esas 


(SP) 就 可 等 价 地 写成 加 的 {无 约束 ) 极 小 化 问题 ， 如 果 我 们 用 
we R 记 某 个 扰动 向 量 , 就 可 将 (5.35) 推 广 成 
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f(2, w), (z, w)EED(f)cR* 
hlæ, w) -| Agile, wed, i=l, ---, m, (5.86) 
| 十 co， ”其 他 ， 
”选择 一 个 将 妈 合 并 入 所 含 函 数 的 适当 形式 ，(SP) 就 变 成 在 所 有 
te R E, ORR MER. (5.86) 给 出 的 公式 推动 了 现 有 的 一 
般 分 析 , 这 分 析 是 基于 Geoffrion™*®, Hamala™®), Rockafellar’* 5 
的 工作 . 
B p ERTE zE BR" 和 wwE Rr HEPA, p RNE 
数 定义 为 


P(E, A) =sup{é "e+ w— h(a, wY}, (5.37) 
所 以 对 一 切 zE BR", EER", wE R, A.C R*, 我 们 有 

ple, wtp E, meet Ma, (5.38) 

特别 地 , G w=0, €-0, HHP CCR MACK, 我 们 得 到 
ple, 0) 十 办 (0 ASO. . (5.39) 

作为 上 上 述 关系 式 的 结果 , 定义 下 列 一 对 凸 规划 ， 

P) mingle, 0), OREM) (5.40) 
(De) max—"(0, A). (对偶 规 划 ) (5.41) 


需要 指出 , 在 这 两 个 规划 中 我 们 寻找 那样 的 z AA, 它们 分 别 给 出 
ple, ORMEN —6°(0, X) 的 极 大 值 , 但 在 很 多 情况 下 没有 这 
Ho ALAR, BR O(a, OW REA ARI FRR, p0, A) 
有 有 限 的 上 确 界 . 我 们 分 别称 pCz, 0) 的 下 确 界 和 一 办 (0，》X) 的 
上 确 界 为 (P。) 和 {D4.) 的 最 优 值 ， 下面 的 结果 是 (5.39) 的 直接 结 
iÈ. 
定理 5.5( 弱 对 惕 性 定理 ) 
inf p(n, 0) sup —¢"(0, A}, (5.42) 
推论 5.6 
3 
d(x", 0) =—f"(0, 1”), (5.43) 
m ae" AA" AEP A (Dye) AYE OE A. 
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A TET & 45 b(2, 0) < +00 MBS Hh, H (4,0) € EDC), 
MRR Py) RER. 类似 地 , 若 存在 六 使 得 pO, A) < +00, 
WWE BL (Dy) AAW. 车 对 一 切 ee BR, (zx, 0O)EED(S), m 
说 (Ps) 是 不 相 容 的 ， BM—-MACR*, (0, 4) EED ($8*)， 则 说 
《Ds.) 是 不 相 容 的 ， 用 这 术 诺 , 从 定理 5.5 可 得 下 面 铺 

Hit 6.7 


车 
inf d(2, 0) 一 一 co (5.44) 
则 (Du 是 不 相 容 的 ， 若 
sup—*(0, 4) = +09, (5.45) 
M POETAE R. 


在 现 有 结果 中 , 凸 性 起 着 核心 作用 , 有 趣 的 是 要 注意 ， 对 不 一 
定 是 凸 函 数 的 四 , 关系 式 (5.37) 至 {5.43) 也 是 成 立 的 , 上 只 要 避免 无 
意义 的 求 和 二 20 十 (一 o0). 例 如 , WR pæ, OE R LAARNE, 
就 可 保证 这 点 ， 对 偶 规 划 的 任何 能 行 解 入 提供 一 办 (0, %) 的 一 个 
值 ， 可 作为 (Ps) 的 最 优 解 的 下 界 . 但 是 总 希望 有 较 (5.42) 更 强 的 
结果 一 一 (Ps) 和 (Dye) 的 最 优 解 正好 相等 ， 这 里 是 凸 规划 和 非 凸 
规划 的 主要 差别 之 --， 对 于 凸 的 办 在 适当 的 正则 性 假定 下 ， 
(5.42) 作为 等 式 成 立 ; 而 当中 非 凸 时 , 可 能 有 一 个 对 偶 性 间隙 , 它 
就 是 当 (6.42) 作为 严格 不 等 式 成 立时 (CP) 和 De) 的 最 优 值 之 
差 . 

WE OR 上 的 闭 正 常 凸 函数 ， 则 g%" 一 由。 把 (D,。) 重 
新 表述 为 原 有 规划 


(Pye) min $" (0, A), (5.46) 
我 们 得 到 对 偶 规 划 
(D,) max—¢"*(a, 0) =max~d(a, 0), {5.47) 


它 在 下 述 意 义 下 等 价 于 本 来 的 原 有 规划 (5.40)， 向 量 % 是 (Ps) 的 
最 优 解 , 当 且 仅 当 它 是 (Do) 的 最 优 解 ， 这 样 ， MAIER A Re, 对 
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偶 性 关系 是 对 称 的 ; (De) 的 对 侦 是 (Ps). 
SMG 相 联 系 ， 我 们 定义 原 有 和 对 偶 扰动 函数 生 和 包 如 


F: 
B(w) = inf ple, w), (5.48) 
PE) inf PE, 2). (5.49) 
下 面 是 扰动 函数 的 一 个 重要 性 质 . 
定理 5.8 
WOR R 上 的 正常 是 函数 , WE Oe Br 上 的 凸 函 
数 ， 


DEBI ARNO AA Le RPO) BR. AW 
SIERO, BU Pp) BARS. Am PCS) abe. Be", 
a) E P(S), (w°, MEP), WH, M-We>0, RAS 
Tı, Sa, (EFF : 

p(s’, w*) <inf plr, w)te=—B(w')+ex<alt+e, (5.50) 
p(x, w’) <inf f(a, w*?)+e=O(w?)+e<e*+e, (5.51) 


BAP PRR, 对 一 切 qi>0, q>, ggat M >o, 
我 们 有 
plg + gan", Qw tgw) < qua! tga tE, (5.52) 
所 以 
Pigu + gow") inf ple, qutt gaw’) 
<P (gre! 十 ga giw +qw’), (5.53) 
结合 (5.52) 和 (5.53)， 可 得 P (qu +qw”) Sga tge, A 
WPS) he J 
容易 证 明 , 下 的 有 效 区 域 由 下 式 给 出 ; 
ED(®) = {w:we R", h(a, w)<-+oo, tz}, (5.54) 
注意 , SE ET Sie Ey BOE) eh AA. 
在 第 A BE Se SC R i BE ATF] SF RTE RT EK 
中 起 重要 作用 .我 们 从 一 个 以 后 将 用 到 的 关于 次 梯度 存在 的 准则 
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引 理 5.9 
设 了 是 四 函数 ，26E 辟 "是 使 jz) 有 限 的 一 点 ， 则 了 在 = 有 次 
梯度 即 IF) 的 充 要 条 件 是 : 对 一 切 yE R, 


Df (as y)> — a, (5.55) 

DEM] 实际 上 将 证 明 相反 的 方面 ， 即 Of (2) ~ 由 的 充 要 条 
HE: 对 某 个 YER, 

D*f (@; y) = D-f (a, y) = — 09, (5.56) 


设 么 是 使 SOAR — A. 由 定理 4.21, d(y)=D*f(e y) 
REF K OBR, CHF a BAC Aw MRA S.C), 这 
样 就 存在 凸 集 F, (13 


orf uve, R 
j d $00, nEE, ee 
d*(n) =sup{ y —d(y)} =0, (5.58) 
PURE BRERA, 
H={nivy, DfA y)>n7y}. (5.59) 


由 定理 4.22 TPE BB f eS ab A ER, 
E=0f (2). d H REISA R, € Edod- 
ADS (zi y)， 空 集 的 指示 函数 恒 为 +o, CHI, WRB 
数 恒 为 ~co、 这 样 , 当 且 仅 当 对 一 切 y, ADH; y) =~ 一品 时 ， 
af(@)=9. 也 就 是 对 某 t D(A YOM —o J 

考虑 凸 扰动 画 数 富 ， 原 有 规划 称 为 稳定 的 , MR. (a) $B(0) 是 
ERE, HRANA yW DO (0, y) = 一 cc， 或 者 (b) @B(0) = 
一 co。 RAZ, (Pa) 是 稳定 的 , 如 果 inf ele, 0) ARERI KM 
D(w) Xt O 的 邻 域 中 任何 邮 不 是 无 限 陡 地 减 小 , 或 者 (Ps) 的 最 优 值 
无 下 界 ， 作 为 引 理 5.9 的 结果 , 我 们 可 以 给 稳定 性 以 另 一 特征 : 规 
划 (P,) 是 稳定 的 , 当 且 仅 当 85(0) 是 非 空 集 . GE REM BBO) = 
一 o0, 则 3D(0) =R*， 非 线性 规划 的 稳定 性 在 没有 是 性 的 假定 下 ， 
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曾 由 Evans {Gould mA, 而 对 某 一 类 凸 规划 , B Hh Dantzig, 
Folkmen,, Shapiro™ 研究 过 . 


i) 5.2.1 
让 我 们 考虑 稳定 规划 和 不 稳定 规划 的 一 些 例 于 . 
(a) & 
o,. >t, 
tue, wd ew, (5.60) 
其 中 sE R, wE R, 容易 证 明 ,对 一 切 we R, 
®,(w) =inf pils, w=, (5.61) 


B.O,(0)=0, RUG, 在 0 处 有 限 ， 确 实 ，8.(0) 由 下 面 一 个 点 
A 


a@,(0) = VE,(0) =1, (5.62) 
因而 (Ps) 是 稳定 的 . 
(b) + 
g, EPV, 
AOO OIO (5.63) 
对 一 切 cew, 我 们 可 得 
P(w) inf hala, W) 一 一 co (5.64) 
所 以 (0) = 一 co， 从 而 (Ps) 又 是 稳定 的 ， 
(c) 取 ; 
pals, i O zA (5.65) 
则 -sw 0 
| oe aa ae 


这 里 D, BAIR TH, 如 图 5.3 所 示 .， 在 名 =0 有 D,(0)=—0, 但 
Dt, (0, 1) = Tim Bal) -20 L ia ees. Lear) 


wrt w 
这 样 , (Ps,) 十 不 稳定 的 。 J 
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BEREME?,) 上 的 一 个 条 件 ， 我 们 将 在 下 面 的 定理 中 用 
这 条 件 以 建立 (Py) 和 (Dy,) 的 最 优 信 的 等 式 ， 建 立 对 偶 规 划 (Dy) 
的 最 优 解 的 存在 性 ， 并 建立 以 tw) 
D 的 次 梯度 表示 的 这 样 一 个 解 
HRE. 首先 我 们 需要 下 而 的 
3%. 

引 理 5.10 

设 ple, wÆ R" 上 的 正 
常 凸 函数 , EM Bw) hi (5.48), 
则 

$*(0, 4) =G"(A), (5.68) 


[证 明 】 我 们 有 图 5.8 不 稳定 规划 的 扰动 函数 
$* (0, 2) ~aup{ Oat Aw ps, w)} (5.69) 
sup (MFw—inf pla, w)} (5.70) 
=sup{A"a— D(w)} =" (A), (5.71) 
1 


我 们 现在 氢 述 并 证 明 一 个 基于 稳定 性 的 强 对 偶 狂 定理 . 
定理 5.11( 强 对 侦 性 定理 ) 
ROPER EMER UBM, HR DOAR, DMD) 
ARAN H 
(0) = inf pls, 0) ~max—¢*(0, A) =—"(0, A") (5.72) 
的 充 要 条 件 为 (Py) 是 稳定 的 .此 外 , 当 且 仅 当 (6.72) 成 立时 ,和 * 是 
P(O KBE. 
【证 明 】 规划 (Ps) 是 稳定 的 充 要 条 件 为 32(0) 非 空 。 由 次 梯 
度 的 定义 ,入 E80(0) 的 充 要 条 件 为 , 对 一 切 wE R 成 立 
P(w) >D(0) +2" w, (5.73) 
所 以 ， 
$0) inf {@(w) aw} = -PA > G0). (5.74) 


213 


出 引 理 5.10 可 知 ， | 
OA) = —$"(0, A) =B(0) = inf h(x, 9); (5.75) 
出 定理 5.5, 最 后 可 得 
一 和 (0， *) =max— ġ* (0, A) =inf A(z, 0). (5.76) 
J 
HPO ORR aE EE SES ASL, Ri AEN Di) 的 
Bek. MUD) BRE, YAR YOV OHS MRR 
路 (7+, 多) 是 闭 正 常 此 函数 ， 那 么 可 得 到 类 似 于 引 理 5.10 和 定理 
5.11 的 结果 . 
52 6.12 
设 plr, wE R? EAE Hh a, 则 
p(x, O) == (a), (5.77) 
DERI 因为 史 是 闭 的 凸 函 数 ， 
pie, 0)=h""(a, 0) =sup{ete+H70— GCE, A)} (5.78) 


supis's —inf P(E, A)} (5.79) 
—sap{tts— (6)} = YP"(%). (5.80) 
] 
这 祥 我 们 就 有 如 下 对 偶 结 果 . 
定理 6.13 


设 由 是 闭 正常 凸 函 数 , HB 史 (0) 有 限 ， 则 规划 (P,) 有 最 优 解 

aw EB 
pla", 0) =min $ (x, 0)—sup—#*(0, A) (5.81) 

BFE (Dy) BEN. wih, YAIR (SBD at, a" 
是 罗 (0) 的 次 梯度 . 

【证 明 】 类 似 于 定理 5.11 的 证 明 ， 3】 

下 面 两 个 推论 是 关于 为 闭 正 常 昌 函数 时 (Ps) 和 (Dy) 的 最 
优 解 的 存在 性 的 . 

推论 5.14 
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HER EMAERDHR, HROCOAR, F(PIM 
(Dyx) 都 是 稳定 的 , 50 PEAR AR, E 
+oo>min $x, 0)=max—g"(0, A)> 一 co， (5.82) 


GEH] 由 定理 5.11 和 5.13, 车 (Ps) 和 和 (Dy) 都 是 稳定 
的 , 则 
min $(%, 0)=max—¢"(0, 4), (5.83) 


因为 由 是 正常 凸 的 ，%(2,， 0) 达 到 的 极 小 值 不 能 是 一 sz， 类 似 地 ， 
一 "(0, *) 的 极 大 信 不 能 是 十 22. 1 

推论 5.15 

设 中 是 闭 正常 是 函数 ， 则 (P,) 是 稳定 的 是 有 最 优 解 ao” AY 
条 件 为 (Ds*) 是 稳定 的 且 有 最 优 解 入". 

【证 明 】 由 定理 5.11 和 5.13， 规 划 {(P,) 是 稳定 的 县 有 最 优 
«RO 的 充 要 条 件 为 
¢(2",0) 一 min $l%, 0} -max—¢"(0, A) =—o"(O, A"), (5.84) - 


但 这 等 价 于 条 件 : 规划 (Dy,) 是 稳定 的 且 有 和解 **.。 3 
#4 6.2.2 


Bes BA ep a KA. 
(a) 首先 设 
TW, 
pils, wa eA FEN, (5.85) 
mY 
. f0,  €+a=1, ABO, 
pE, Daf o, a (5.86) 
所 以 稳定 规划 (Ps,) 可 以 写成 
min ıs, 0) =min g, (5.87) 
而 (Dyt) 由 下 式 给 出 ; 
max —"(0, A) =max 0, (5.88) 


Ge, ming=0, H (Pa) M (Din 的 最 优 解 分 别 是 2” 0, 


了 


Val, RNEER, AM we RH Blu) —w, H (0) 一 0 
ab, (0) = {1}, 
Kt, 
0, <1, 
wen-{i bey 
由 此 推 得 多 (0) —0, 且 B&z:(0)= {0}, BF UL (Dar) 也 是 稳定 的 
ESk, RANA 2" OW CO) Al ME aw (0), 


(5.89) 


(b) 其 次 ,到 
8, TM, 
dle, w) =] ee (5.90) 
则 
0, $+ 入 = 一 1, a>od, 
bilé, A) a Ki (5.81) 


Pi) 的 最 优 值 为 一 c2, 也 就 是 
inf $: (2, 0) 一 inf 一 “= —oo, (5.92) 


SEAR LA D). RTLS A, 对 一 切实 数 信 

(0, NEED) (Hy A= —1, 10 EHR), 
(0) & 

ofe @)<w, 

gala, w)~f eee A U 


FEA 5.2.1 中 我 们 已 看 到 ， 规 划 (Ps,) 是 不 稳定 的 ， 计算 $s 的 共 


Fook se, 可 以 证 明 


(5.93) 


0, © =l, A=0, 
pié, à) = -E A<0, (6.84) 
Leo, 其他, 
(Pa) 的 最 优 解 是 4*=0 且 
min ds(a, 0) =0. (5.95) 


转向 对 个 规划 (Dor), 我 们 得 到 
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1 
— * = — 一 5. 
pe op Oe) 


但 没有 实数 和 *, 使 上 确 界 达到 .3 

我 们 已 经 辕 到 ， 稳 定性 是 关于 凸 规划 对 偶 性 的 一 个 非常 重要 
的 性 质 , 实际 上 , 我 们 将 看 到 它 在 建立 凸 规 划 的 Lagrange (Kuhn- 
Tucker) 慰 子 的 存在 性 中 起 同样 重要 的 作用 ， RE, DRS 
稳定 性 的 条 件 是 重要 的 ， 在 上 一 章 我 们 定义 了 强 相 容 规划 , 现在 
对 后. 和 ) 所 给 的 更 一 般 的 凸 规划 , 重新 给 它 定义 . 

规划 Py) 称 为 强 相 容 的 ， 如 果 存 在 正 数 s， 使 得 对 一 切 满 足 
jw <e Rw, AARE WE p, w) < 十 ce。 读者 可 以 证 明 ， 
对 于 南 人 6.30) 和 (5.3+) 给 出 的 SP)7 形 式 的 凸 规划 ， 上 一 章 所 定义 
的 强 相 容 性 意味 着 存在 一 个 o, 使 得 

gw >0, i=l, =, m, (5.97) 
而 这 条 件 转 过 来 蕴涵 着 相应 的 (Ps) 在 刚才 意义 下 是 强 相 容 的 ， 而 
(Py 是 从 一 个 在 约束 右边 有 扰动 向 量 ww 的 规划 导出 米 的 .要求 
读者 证 明 下 面 的 定理 . 

定理 5.16 

BUR (Py) A a EH AOR ED OMAR. 车 
(Py) RAMA, SCP.) eS ERS. . 

后 一 个 断定 的 逆 命 题 不 真 , 因为 有 这 样 的 稳定 规划 , 它 是 相 容 
的 但 不 是 强 相 容 的 . 

我 们 简短 地 提 一 下 对 揭 性 间 际 的 概念 ， 即 原 有 规划 的 最 优 值 
严格 大 于 相应 的 对 偶 规 划 的 最 优 值 的 情形 ， 在 缺少 稳定 性 的 情况 
下 , 我 们 可 以 象 下 面 说 明 的 那样 , 构造 这 种 例子 ， 

pi 5.2, 8% 

AAG pa, w) 的 问题 ,其 中 zE R, we R H 

max[—1, —(—wy%,)7/*], 
plz, w) = ~w =p 0 H, s0, (5.98) 
+90, 其 他 . 
BR, Oe, 0) 或 者 为 0 或 者 为 to, PORRER 
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inf ${z, 0) =min p(z, 0) =d(a*, 0) =0, (5.99) 
其 中 at 不 妨 取 为 四 一 (0, 0), BEA AT LUE 


—1, 20<<0， 
P(w) -| 0, Wi = 0, (5.100) 
+00, w,>0, l 
县 B00) 一 0， 因 为 8G6(0) 是 空 的 ,或 者 等 价 地 ， 因 为 Ow) ERA 
的 每 个 邻 域 中 (在 负 ww 方 向上) 无 限 陡 地 减 小 ， 所 以 规划 (Ps) 是 
不 稳定 和 的， 读者 也 可 以 验证 
1, n>0, Ay—0, 
VAR (Dee) RS TF AG H: 
sup 一 内 (0, A) 一 max 一 由 (0, A)=—ġ"(0, A") 一 一 二 《6.102) 


其 中 入 不 妨 取 为 姑 一 (0 0), AA 
min (z, 0) =0>~—1=max—¢"(0, à), (5-108) 


我 们 就 得 到 一 个 对 偶 性 问 阶 . J 

在 例 5.2.2(o) 中 , 我 们 有 一 个 不 具有 对 侦 性 间隙 的 不 稳定 的 
天 有 规划 ， 而 例 5.2.3 给 出 一 个 具有 对 偶 性 闻 阶 的 不 稳定 的 诛 有 
规划 . 这 两 个 原 有 规划 的 主要 差别 在 于 相应 的 扰动 聊 数 ， 不 具有 
对 偶 性 间隙 的 一 对 规划 的 原 有 扰动 函数 是 闭 凸 函数 ， 而 例 5.2.3 
的 原 有 拒 动 函数 在 w=0 不 闭 ， 但 注意 , 两 个 例子 中 的 原 有 目标 
函数 由 都 是 闭 凸 函数 . AMES, 原 有 和 和 对偶 扰动 函数 在 原 
点 的 闭 性 是 原 有 和 对 伪 规 划 最 优 值 相等 的 充 要 条 件 . 

在 证 明 这 结果 之 前 , 我 们 需要 下 面 的 引 理 . 


(5.101) 


5132 6.17 

i pin, w) RY ERREN eM, 则 
(0) =— 1P (0), (5.104) 
W(0)= -ei DO), (5.105) 


【证 明 】 我 们 将 证 明 (5.104)， 要 求 读者 证 明 (5.105). 我 们 


—ol W (0) = —W*(0) = —sup{0"s — P" (2)} =inf W(x), 


(5.106) 
由 引 理 5.12 得 到 

inf W* (æ) ~inf $(«, 0) =5(0), (5.107) 

1 


现在 我 们 可 以 叙述 和 证 明 下 列 定理 . 
Æ 5.18 


Rote, w) fe R EMER RIK, WTS A de & OF 


(1) @(0) ~inf $l, 0) —aup—$*(0, A)= -F (0). 
(5.108) 

(i) RARS ae D FE w— 0 处 是 闭 的 . 

(Hi) HARIEN F E E= 处 是 闭 的 . 

DER] 从 引 理 5.17 AAEM EL RNA, (0) = -P 0) 
的 充 要 条 件 为 菠 (0) cl DO), Æti, P0) = 一 罗 (0) 的 充 要 条 
tA O)=—aAlVO), F 

Rockafellar'” gA R (P,) Æ ER, 如 果 定理 5. 18 的 第 Gi) 
部 分 成 立 ， 类似 地 ，(Dyw) 称 为 正规 的 ,如果 第 (过 ) 部 分 成 立 、 用 
这 些 定义 , 我 们 得 到 上 面 定 理 的 下 述 推论 ， 

推论 6.19 

Hos, wR A KRAIER SRR. MRCP.) 为 正规 且 
它 的 最 优 值 有 四 的 充 要 条 件 是 : De) 为 正规 且 它 的 最 优 值 有 限 ， 
这 时 它们 的 最 优 值 相等 ， 反 之 , 如果 inf $e,0) =sup—$"(0,A), 


则 (Py 和 (Dy) 两 者 都 为 正规 的 ， 


5.3 最 优 性 条 件 和 Lagrange RF 


在 本 节 中 ， 我 们 试图 将 上 一 节 导出 的 凸 规划 的 对 偶 性 关系 与 
第 3 章 和 第 4 章 中 的 最 优 性 条 件 联系 起 来 .我们 的 第 一 个 问题 
是 , WF (Py) ERA GRR, 找 出 Lagrange 乘 子 和 Lagrange 式 的 
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适当 定义 ， 如 前 面 那样 , RES EM, 


(SP) min f(x) (5.109) 
受 限 制 于 

g(a) 0, tml, =, M, (5.110) 
并 考虑 扰动 问题 的 一 种 可 能 形式 
(PSP) min f(a) 《5.111) 
受 限制 于 

glun, t=1, =, m, (5.112) 


在 上 两 问题 中 ， 了 和 ODER LIER o RAM EA A A 
数 ， 定 义 l 
-Te aE ED(f) eae: i=}, =e, m, 


di(@, w) = 4-00, 其 他 ， 
(5.113) 
且 定 义 扰动 丽 数 为 | 
P(w) =inf d(x, w). (5.114) 


现在 设 了 是 代价 函数 , 代替 在 无 扰动 问题 (SP) 中 求 了 的 极 小 ， 
我 们 可 以 求解 更 一 般 的 问题 (PSP)， 并 支付 一 个 量 Shen, 其 中 


ASO 是 第 5 个 约 来 中 每 单位 扰动 所 付出 的 价格 .于 是 我 们 可 以 
问 : 在 怎样 的 条 件 下 , 无 扰动 问题 (SP) 的 解 依 然 是 最 好 的 选择 ? 回 
答 是 ,车 对 一 切 wE BR" 成立 

Dı (w) -$ Aan >D, (0), (6.115) 
则 它 依然 是 最 好 的 选择 ， 这 不 等 式 被 满足 的 充 要 条 件 是 , 对 所 有 
适合 g(e)muw(i—l, +, m) Hy ce R Al WE R, RIX 


f@)- Shanes 0), l (5.116) 
车 我 们 假定 D, (0) 有 限 ， 则 (5. 116) 等 价 于 条 件 ; 对 一 切 6 RB, 
F(z) 一 Bags (2)>G,(0), 665.17) 


(6.117) 的 左边 是 星 先 几 章 中 所 定义 的 、 与 SP) 相 联系 的 
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Lagrange J, à 是 Lagrange RF. 使 (5.117) 左 边关 于 z 的 下 确 
界 与 (SP) 的 下 确 界 1 (0) 相 一 致 的 非 负 Lagrange RTF A 也 称 为 
“平衡 价格 "(5.117) jaa LAY JLE eS H 
RUBE Ae RA BY. 
在 前 面 讨 论 的 推动 下 , 我 们 扩充 Lagrange FF Bl — AMA 
形 . CPs) AE G.40) 定义 的 规划 , 又 设 DOAR, WAER 称 为 
(P,) 的 Lagrange RF HE, 如 果 对 一 切 wE RA 
TW) ~ Aw (0), (5.118) 
类 似 地 ， 如 于 (0) 有限 ， 我 们 定义 oC BR" 是 (Dx) 的 es He 
F,MRM-WECR 
BE) —£72*>¥ (0). (6,119) 
将 上 面 两 个 不 等 式 与 (4.110) 比较 , TREE, (0.118) (5.119) 
分 别 等 价 于 条 件 NE OD (0) Hl eE OWO) 
类 似 地 , 我 们 定义 相应 于 (Py) 的 Lagrange RA 
L(a, à) =int{ġ$ (s, w) — Aw}, (5.120) 


这 函数 也 称 为 相应 于 (Ps) hy “Kuhn-Tucker 函数 ”"， 见 [19, 31], 
在 本 节 的 余下 部 分 , 我 们 给 出 将 一 对 规划 (Pw MOa) Lagrange 
ARF A Lagrange 式 的 鞍点 联系 起 来 的 一 系列 结果 . 某 些 结果 将 
用 不 局 的 术语 来 表达 , 不 可 避免 地 在 某 些 定理 中 将 有 所 重复 . 

第 一 个 结果 是 关于 凸 规划 的 Lagrange 乘 子 的 存在 性 的 . 

EE 6.20 

假定 人 bs) AR, 则 存在 Lagrange RT yp A KERR 
件 为 (Pe) EIER. HEA Æ (P) BY Lagrange RT RR 
RIFA A'E aB), 

[证 明 ]】 如 (Fw 有 一 个 最 优 解 , BP (0) 有 限 , BLA, aa (0) 非 
空 的 充 要 条 件 为 (Py) 是 稳定 的， 进一步， 从 Tagrange 乘 子 的 定 
义 可 推 得 ，%" 是 Lagrange FEF BE BH HE HM 是 多 (0) 的 
PB. 了 

这 个 定理 有 一 个 有 趣 的 含义 ， 既 然 可 以 认为 它 是 对 于 点 规划 


dei 


的 一 般 结 果 , 我 们 断定 , 对 这 样 的 规则 , 要 使 Lagrange RT AE, 
换言之 要 使 Kuhn-Tucker 条 件 满足 ， 稳 定性 是 一 个 充分 且 必 要 
的 品 性 ， 所以 ,一切 不 同 种 类 的 约束 品 性 在 上 四 规划 的 情形 必定 缠 
涵 着 稳定 性 ”上面 定 理 的 对 偶 形式 为 下 面 定 理 . 

H 6.21 

假定 (Dw) 有 最 优 解 , MFE Lagrange eT (NB o 的 充 要 条 
HAOD EREN. E t 是 (Dox) 的 Lagrange ÆT i ERE 
要 条 件 为 2*E9 (0), 

现在 转向 刻 划 Lagrange HF MARA HE, he Rt 
EKER DAN. 

we 5.22 | 

向 量 外 是 (Pe) 的 Lagrange 采 子 向 量 的 充 要 条 件 为 : 入 是 
(Da) BIE AO (0) = p" (0, A). 对偶 地 ， 设 由 是 闭 的 ， 则 
a" E (Dee) 的 Lagrange RT TEA A o" Æ (Py) 的 最 
TRB. f(z", 0) = — W (0). 

DEH] 由 定理 5.20， 若 入 是 (Ps) 的 Lagrange 莱 子 向 
BW ACAD), WER 5.4, RNA OE ADA"), MURR 
EATI, D'EN KIE MRA (4.110), H31% 5.10, 
这 等 价 于 y ED HRE E. ROT ALN, medo) +O, 则 
P0) =c (0). WHE 

olG(0) =B" (0) sup {07A —G"(A)}, (5.121) 


出 引 理 5.10 我 们 有 
sup{0"A -P (A)} =sup—ġ" (0, 2) = — p*(0, à"). (5.122) 


BM E (Dow) HRIH. D0) = -o0 A), A] 5.10, 
RERE D 在 入 达到 它 的 极 小 值 ， 所 以 0E 6B* a, h (5.121) 
fil (5.122), P(0) 一 ol (0), HEH D.4, ACIDO). ZANE 
(P,) 的 Lagrange EF RIM. HARARE I 

考虑 如 上 定义 的 Lagrange 式 ， 我 们 将 证 明 这 函数 的 类 似 于 
第 3 章 和 第 4 章 的 鞍点 结果 。 首 先 我 们 考察 工 的 凸 思 性质， 
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引 理 6.28 

相应 于 (Pp) 的 Lagrange 式 , 对 任何 固定 的 入 是 2€ Bh R 
数 , 对 任何 固定 的 2 又 是 入 ER* 的 四 函数 . 

DE] 对 任何 固定 的 和 , 工 关于 的 同性 的 证 明和 定理 
5.8 的 证 明 相 同 . 

(x, A, a) EQR(D), @, X, a) EQ), Ep E LW 
下 图 象 , 则 


a<L(e, X) = inf {br, w) — Aw}, (5.123) 
a<E(a, A) =inf {p(s, w) Aw) (5.124) 
FA th 
qa + ga0 Sinf {gp (aw, w) — gA w} 
pa inf {gap (z, w) ~qah7w}, (5.128) 
也 就 有 


qe +ga’ int {p (a, w) 一 《GEL 十 god?) Tw} 
=L(%, qatga’), (5.126) 
这 就 是 说 ， 对 任意 国定 的 4$，(%, ga tgh, gtg) ERC), 
从 而 工 关 于 入 是 问 的 。 J 
”相应 于 (Po) 的 Lagrange RÆ (6.120) 中 定义 为 四 的 函数 ,下 
面 我 们 将 看 到 ,可 以 把 这 关系 倒 过 来 。 下 一 个 引 更 的 证 明 利 用 了 
SpE RR 上 的 凸 函数 ， 对 每 个 国定 的 GE 部 ， 
Jo VY BRAHMS E yA 
Jale, 0) =sup{n"y—f (Œ, 9)}, (5.127) 
而 对 每 个 国定 的 z, Tie, M PRAIRIE ol f(z, y), HP 
包 运 算是 关于 第 二 个 变量 的 . 
引 理 5.24 
HAR ** EAA TERS h wR, 则 
p(x, w) =sup{L(z, A) +ATw}, (5.128) 
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一 内 (£, 入 ) =inf{L (z, A) —é* 2}, (6.129) 


【证 明 ] 我 们 有 
supi} (a, A) +A 20} =sup {inf (h(a, w) ~ Nu tiTw} (6. 130) 


_ =sup {Aw — suplaTu—d(a, #)}} (6.181) 
—sup{Nw — po (æ, d)} 


=, Œ, w) =a, w), (6.132) 
类 似 地 ， 
inf {L(2, 4) 一 上 co =inf inf {p (u, u) — Ew— ATu} (5.133) 
=- (É, A), (5.134) 
1 
作为 这 引 理 的 直接 结果 , 我们 得 到 
p(z, 0)=supL(w, A) ` (5.135) 
和 
—¢*(0, 4) ~inf L (a, A). (5.136) 
在 Lagrange UAE KURAR BY. BO h A RU Fs BF TB E 
AKASUET MEAP, 


定理 5.25 

BEGÆR? LMR ELM, LMT (P,) 的 Lagrango 
A. Cw", 入 ) 是 了 的 鞍点 , 则 是 (Pp 的 最 优 解 ， 和 E Dye) 的 
最 优 解 , H 


f(a", 0) = L(x", A) = p (0, 4”), (5.187) 
【证 明 】 xt — Mee a MACH G 
Lia", <L(a", NW) «Le, A"), (5.188) 
则 由 (5 135) 和 (5.136) 有 
人 =sup Liat, NM) =9(2*, 0), (5.139) 
La", A”) 一 地 所 (a, A") = —G" 0, d*), (5.140) 


由 推论 5.6 可 得 ,2” 和 入 " 分 别 是 (Ps A (Doe) KORE. 】 
了 8 


这 结果 的 逆 命 题 是 于 列 定理 . 

定理 5.26 7 

o> BAER RR. OP.) EPERE OE (Py) 的 最 优 
解 , 则 存在 2", 478 Co", A") fe Lagrange 式 工 的 鞍点 。 对偶 地 , 若 
(Doe) 是 稳定 的 且 EDn) 的 最 优 解 , WEE a, 使 得 (wz*, 入 ) 是 
Lagrange 式 工 的 鞍点 ， 

GEA] 若 关 于 (Py) 的 假定 成 立 ， 则 由 定理 5.11， 存 在 
(De) HREAN, H oa, 0)=—G"(0, A). H (5.135) 和 
(5.136) 有 

sup D(a", à) =inf Eta, a), (5.141) 


显然 
sup Lis, MA) L(Y 2") >inf Lis, a), (5.142) 


HAR — N ce R MAER, RNA 
Eta", A) <sup Lia, X= Ll, av) 
=inf D(a, 4°) <D(a, A). (5.143) 


对 侦 部 分 的 证 明 是 类 似 的 ， 是 

下 面 的 定理 概括 了 本 节 的 主要 结果 ， 它 的 证 明 是 基于 前 面 叙 
述 的 结果 , 留 给 读者 去 完成 . 

定理 #. 鸣 (等 价 性 定理 ) 

HOE R 上 的 闭 正 常 凸 函数 , 则 下 面 五 个 陈述 是 等 价 的 ; 

Ci) WEG, AEAT P) 的 Lagrange 式 的 鞍点 . 

(ii) 向 量 a" 是 (Ps) 的 最 优 解 ， 而 A" 是 (P,) 的 Lagrange 乘 
子 向 量 . : 

(iti) Ta] BEA" FE (Dye) RI, To" 是 (Dw) 的 Lagrange R 
子 向 量 . 

Civ) 向 量 江 和 分 别 是 (P,) 和 (Dye) 的 Lagrange RFH 
R, Hga, 0) = 一 $B*(0, A"), 

(Vv) 规划 (P)) 和 (Dye) ENR, He, 入 分 别 是 (Ps) 和 
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(Do) RRE. 


5.4 标准 凸 规划 的 对 侦 性 和 最 优 性 


现在 我 们 把 前 风 节 的 结果 用 于 本 章 之 初 所 定义 的 标准 凸 规 
XY, 借 此 来 说 明 这 些 结果 . 为 了 方便 , 我 们 重 述 标准 原 有 规划 如 下 : 
(SP) min f (2) (5.144) 
受 限制 于 
TO0, 了 一 二 =, m, (5.145) 
其 中 子 和 a Dade R LAER eA. 注意 ， 可 以 通 
过 增加 一 个 “ 隐 式 ”约束 把 问题 CSP) 稍 作 修改 ， 例 如 ， 在 满足 
《5.145) 的 同时 ， 限 制 z 属于 一 个 给 定 药 凹 集 XCR, 这 一 修改 
使 我 们 可 以 把 (5.1 杂 ) 中 一 个 或 几 个 约束 转移 到 集 X 中 ， 结 果 得 
到 对 偶 变 量 较 少 的 另 一 个 对 偶 规 划 . 一 : 般 来 说 , 这 样 艇 没有 什么 
好 处 , 因为 如 下 面 将 要 看 到 的 , 对 偶 规 划 中 求 极 大 值 的 函数 这 时 很 
少 能 明显 地 表示 出 来 ， 除 非特 别提 出 , 我 们 总 假定 X 就 是 RP’, 
让 我 们 回 到 (SP) 并 引进 (5.145) 右边 的 扰动 ， 扰 动 问题 给 出 


为 
min f (a) (5.146) 
受 限 制 于 
glaw, =l, ++, M, (5.147) 
挑动 函数 是 


P(w) =int{ f(w):g(e) mm, 3 一 二 (5.148) 
为 了 得 到 相应 于 (SP) 的 对 倡 规划 , 我 们 写 下 
h(a, w) 一 oe oe @=1, +++, m, 


ERE p ÆA CBR, BHA EMS 
p <é, A) =sup{E < 十 Nt — h(s, w)} (5.150) 


os {f7a-+APw—f(z)}. (5.151) 


(5.149) 
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引进 非 负 “ 松 弛 变量 ”s, 我 们 可 以 把 约束 (5.147) 转 化 为 


wm=n(e)—s, i=l, =, m, (5.152) 
3,20, iai emi (5.153) 
从 而 得 到 
P(E, 1) =sup {Ere +3) agile) -f (a) 上 二 sap{ 一 Na 
(5.184) 
所 以 
人 \, aso, aie 
十 co， 其 他 . 
极 大 化 一 和 (0, 入 所 构成 的 (SP) 的 对 得 问题 , 它 由 下 式 给 出 ; 
(DSP) max f inf| (2) > Agi(a) I}. (5.156) 
VARIAR Y 是 


PE) ~inf pff tingla) fo) |, 6.157) 

让 我 们 计算 与 (SP) 相 联 系 的 Tagrange st. H (5.120) 和 
(5.150), 有 | 

L(g, A) =inf {f(a)—Nwig(e) mu, i=l, e, m}, (5.158) 
Pi — PES BER EEE &, 我 们 得 到 | 
F@)-Zrg(a), 120, 

一 Se， 其 他 ， 
对 于 那些 使 工 (z, 和 ) 到 有 限 值 的 2 和 ,上 面 的 公式 相应 于 与 问题 
(SP) 相 联系 的 Lagrange $, 如 第 2, 3, 4 章 所 定义 的 . 

(SP) 的 Kuhn-Taoker 型 最 优 性 条 件 现 在 容易 从 本 章 的 一 般 
结果 导出 。 利用 稳定 性 的 概念 ， 这些 条 件 变 得 比 前 面 几 章 的 类 似 
结果 更 强 . 

定理 5.28 

假定 (SP) 有 最 优 解 2", 则 当 且 仅 当 (8P) 为 稳定 时 , 存在 向 量 
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L(a, A) -| (5.159) 


WER", 使 得 


0, (5.160) 
Moa") 一 0， i=l, ++, m, (5.161) 

H Lagrange A L AR A Ca", 入 ),， 即 对 所 有 和 之 0 Ace R" 成 立 
List, N<L(2*, MEL(S, A^). (5.162) 


GEH] 设 (SP) 是 稳定 的 , 由 定理 5.20, 存在 Lagrange 乘 子 
LEAT, EAE ATE 00(0), AIM A wE RB", 有 


Dw) —Aw>P (0), (5.163) 
选取 wi=(—1, 0, “ety 0)’, Al i 
A> G(0) —B(w), (5.164) 


因为 把 包 的 第 一 个 分 量 从 0 降低 到 一 1 不 能 增加 全 的 值 ， 这 不 等 
SR 4s LAR A, Br AiO, w= (0, —1, 0, …, 0, R 
们 得 到 AsO, 类 似 地 入 之 0, 4 一 1 =, m AA kt (BP) 是 能 
行 的 , 我 们 有 


Mgl 20, t=1, =, m, (5.165) 
以 m= (g(s), 0, ae 0)T 代入 ， 就 得 
OT © 0) > Aig a"), (6.168) 


上 述 不 等 式 的 左边 必定 为 0， 这 是 因 ] 为 ， 若 gh{z") 一 0， 则 上 式 
中 的 差 饵 为 0; # gi(a*)>0, A w A 0 48 tm Bl ge), 这 并 不 
改变 (SP) 的 最 优 解 ， 因 而 的 值 不 会 变 得 离开 人 (0)， 这 样 ， 
Oige"). AURA Digla), t=1, =, m。 所 以 (5.161) 
必定 成 立 ， 由 定理 5.26, HEr, AED WA. RS, 设 入 是 
Lagrange RF, Bila", Aw) L xt PA ASO Ace R" i Re 
Ai, W 3 


F-E Nga) > flat)— F Nala) =f), (5.167) 


其 中 等 式 由 (5.161) RB. 因为 和 >0, 对 于 所 有 满足 glo) >w 
一 二 =, mA E R w, 我 们 得 到 


fo) -Ži nwa"). (5.168) 
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RAF])=<G0), 取 (5.168) 左 边关 于 的 下 确 界 ， 则 对 所 
有 wE EDC), 成 立 


D(w)— > Nw (0), (5.169) 


mMEwWEED(S), RMA Dw) = 十 ce， 从 次 梯度 的 定义 可 若 
SEDO). XH, (SP) 是 稳定 的 ， J 

这 定理 燃 似 于 定理 4. 入， 那里 我 们 假定 了 蕴涵 稳定 性 的 强 相 
RIE HAREE ERAAI, 我 们 不 能 证 明定 理 4.41 K 
命题 ， 但 是 注意 , 对 于 闭 的 了 和 gg, 可 以 对 DSP) 问题 叙述 和 证 明 
类 似 于 上 面 定理 的 对 侦 结 果 . 

现在 我 们 转向 函数 了 和 % 可 微 时 的 最 优 性 条 人 忻 ， 下面 的 定 
理 构 成 可 微 (SP) 规 划 的 一 组 Kuhn-Tucker 型 最 优 性 条 件 . 

定理 6.29 


BSa s Im 分 别 是 至 E H SE ABT PY ho Be FN YB 


数 ， 假 定 (SP) 有 最 优 解 2*， 则 当 且 仅 当 (BP) 为 稳定 时 ， 契 在 向 量 
WER", 使 得 


vi <a") -$ rvala’) =0, (5.170) 
Note") =0, i=l, +, m, (5.171) 
M0. (5.172) 


【证 明 】 设 (SP) 是 稳定 的 . 由 前 面 定理 可 知 (5.171) 和 
(5.172) 是 成 立 的 , 所 以 我 们 具 需 证 明 (5.170) 成 立 . 由 定理 5.11， 
(DSP) 存 在 最 优 解 入 ， 且 (SP) 与 (DSP) 的 最 优 值 是 租 等 的 、 所 以 


F(a) =inf | f(a) Bary), (5.178) 
或 者 对 所 有 o, 
FFE- E Ng (a), (5.174) 


hema" 代入 ， 可 看 到 (6.174) 右边 出 现 的 函数 在 少 达到 它 的 无 
AAR MA, 所 以 它 的 梯度 在 那里 为 9， 共 而 全 ,170) 成 立 ， 道 傅 
汗 部 分 的 证 明 平 行 于 前 面 定理 的 证 明 , 贸 给 读者 去 完成 . J 


(SP) 的 对 偶 规 划 已 由 很 多 学 者 探讨 过 ， 他 们 提出 了 若干 种 撒 
RAK, 其 中 每 一 种 都 可 以 从 本 章 的 结果 导出 。 显然, 对 每 个 原 有 
HRU, 我 们 可 以 表述 很 多 不 同 的 对 偶 规 划 , 引进 一 个 扰动 形式 谍 
有 一 个 对 偶 规划 ， 

对 于 (SP)， 本 节 所 用 的 扰动 形式 产生 了 这 样 的 对 侦 规 划 
(DSP), EAI A bree [ 见 (5.156)] 是 用 一 个 附加 的 最 优化 问题 
来 给 出 的 , 即 表 示 为 


inf | ORDO l (5.175) 


但 是 ,对 (SP) 的 某 些 特殊 情形 或 者 扰动 的 其 他 形式 ， 这 个 附加 的 
最 优化 问题 可 以 明显 地 解 出 ， 这 一 点 将 在 下 面 的 例子 和 第 ”7 章 中 
说 明 . 


$i 5.4.1 
让 我 们 用 本 章 的 结论 导出 线性 规划 的 对 偶 ， 原 有 线性 规划 为 
(LP) min es - (5.176). 
受 限 制 于 
Asb, (5.177) 
£0, (5.178) 


其 中 4 fd mm Xn KERF, bF eaa om SEAM ne HER. 在 约束 
的 右边 引进 扰动 ,我们 得 到 

ca, Aa—b>w, «>», 

bona »)={ ee gee (5.179) 

#1 : 

PE, A, v)= sup (a+Mw+r%—cla}, (5.180) 

Ase bw 

这 表达 式 简 化 为 

ie x »-| {Eet A A+7)7@—ATH}, ASO, ga 

+09, 其 他 ， 

(5,181) 

所 以 a 


， —APb, AO, v 庆 0，AT% 十 p=6 一 色 
ECE, A, »=f Yo Fin. (5.182) 
对 偶 线 性 规划 成 为 
(DLP) min av (5.183) 
受 限 制 于 
ATAO, (5.184) 
和 >0, (5.185) 


其 中 对 偶 变 量 已 经 从 问题 由 消去 了 ， 因 为 它 只 不 过 是 一 个 松弛 
变量 . | 

(LP) fi) TA HE ET (SP) ARR ATER, (DLP) 可 以 从 本 节 的 
结果 得 到 ， 为 了 这 样 做 , Sf (e) cs, g(2)—Ae—b, X= fe: 
z 之 0}. 则 对 偶 规划 (利用 皇 先 讨论 过 的 增加 隐 式 约束 来 修改 (SP) 
问题 ), 我 们 有 


max { inf [ea —A7 (Ax—b)]}, (6.186) 
整理 (5.186), 我 们 得 到 | 

max {inff(e— ATA) 2+ATH}}, (5.187) 
这 样 ， 求 极 大 值 的 函数 当 ce> AT pA ATO, MERE eH 


— oo 


线性 规划 的 最 优 性 条 件 和 对 侦 性 定理 当然 也 可 以 从 本 章 的 一 
般 结论 导出 。 J 

BRATS Fe Ee Hs PY FO ER FS FS SE BB AS GT E 
方面 的 早期 工作 加 以 比较 ， 以 结束 这 一 节 ， 一 个 典型 的 例子 是 下 
面 由 Wolfe™® 引进 的 一 对 对 偶 问 题 : 


(WP) min fe) (5.188) 
受 限制 于 

g(z) 20, i=l, =, m, (5.189) 
和 
(WD) max | f (2) -Ši agi(a) | (5.190) 
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受 限 制 于 
Vf (2) = > NVete), A290, (5.191) 


FP FA gy Sh ASE RY ESAT Ps A. 我 们 立即 
注意 到 ，Wolfe 的 原 有 问题 恰 是 我 们 的 (SP) 形 式 . 让 我 们 把 他 的 
对 侦 问 题 (WD) 联 系 到 (DSP)， 为 了 方便 ， 我们 重 述 (SP) 的 对 侦 
为 


(DSP) mar{int| fæ)- Singa) |}. (5.192) 
首先 我 们 注意 , 给 定 任意 和 >0, KE AR Wolfe 的 对 个 问题 是 能 
行 的 充 要 条 件 为 ,Ss 是 f(z) -F igla) 的 整体 极 小 值 点 。 这 条 件 


FIA S EE, go 的 四 性 和 (5.191) 的 棉 度 条 件 推 得 的 ， 这样， 
(5.190) 和 (5.191) 可 以 等 价 地 重新 写成 问 是 
(wap) max{min[F(@)—S aga) J}, 6198) 
其 中 进一步 限制 为 使 上 式 中 的 极 小 在 某 个 “达到 的 那些 值 
我 们 可 以 看 到 , 如 果 和 对 (WSD) 能 行 , 则 它 对 (DSP) 也 能 行 ， 
且 求 极 大 什 的 函数 是 相等 的 。 但 是 如 果 最 优 解 对 (W8D) 不 是 
能 行 的 ， 那 么 (DSP) 的 最 优 值 可 能 大 于 (WSD) 的 最 优 值 ， 在 
Wolfe 所 研究 的 条 件 下 ,这 种 情形 不 会 出 现 。 我 们 首先 建立 下 而 


的 引 理 , 它 从 以 前 的 结果 直接 可 推 得 ， 
引 理 5.30 


F(@)—S Ngo) 
的 整体 极 小 值 点 ,其 中 A 是 (DSP) 的 最 优 解 . 
【证 明 】 设 冤 是 (WP) 的 最 优 解 ， 由 定理 5.11， (DSP) FR 
REN, ADA 
f(a") =inf { f(a)— > Atg. Ca) b (5.194) 
由 定理 5.22 和 5.28 AA, X iml, oe m 有 和 gi(w*") =0, 因此 
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fa -$ ACD =inf{ f(@)- 2 Algs(a) } (5.195) 


BARNARD ARMARS FRA. I 

AAR, BWPYBRERARIM, WCWSP)A 
(DSP) 的 最 优 解 是 相同 的 。 Wolfe 在 Kuhn-Tucker REP EA 
BY AN A EF ep CWP) RR BE, 叙述 他 的 强 对 偶 性 定理 ， 
ee PF A CWP) SB ae a 

£32 5.381( Wolfe) 

如 果 e 为 (WP) 的 解 ， 那 么 存在 A", HEIR Ge", 入) 为 (WD) 的 
E, 且 它 们 的 最 优 值 相 等 ， 

上 述 问题 CWD)7 除 了 特殊 情形 外 , 在 计算 上 不 是 很 吸引 人 的 ， 
虽然 (WP) 是 凸 规划 〈WD) 一 般 是 非 凸 的 ， 它 含有 比 原 有 规划 更 
多 的 变量 , 它 的 目标 函数 关于 (zz 入) 不 是 凹 的 ， 它 的 能 行 集 不 一 定 
是 西 的 , 与 Wolfe 的 对 偶 性 关系 相 类 似 的 讨论 可 以 在 Geoffrion™ 
和 Whinston™ 中 找到 . 

如 果 CWP) 中 的 约束 (5.189) 全 是 线性 的 ， 我 们 就 得 到 
Dennis® 和 Dorn” 研究 过 的 一 对 对 偶 问 题 ， 前 一 工作 是 有 赵 
的 , 因为 它 利 用 Legendre 变换 , 我 们 已 看 到 Legendre pkk 
函数 是 密切 相关 的 。 Wolfe 关于 非 线性 凸 规划 的 对 偶 性 的 处理， 
是 这 领域 中 在 Rockafellar 的 结果 之 前 一 些 工 作 的 代表 性 例子 . 
所 有 这 些 早期 工作 强烈 地 依 昔 非 线 性 规划 中 具有 或 不 具有 可 徽 性 
的 Kuhn-Tucker 理论 2， 这 理论 本 身 是 经 典 最 优化 的 Lagrango 
乘 子 理论 的 扩充 在 这 些 著 作 中 ， 我 们 可 以 举 出 Cottle， 
Dantzig Eisen berg, Cottle, Eisenberg’, Hanson™!, Huard, 
Mangasarian™*, Mangasarian, Ponstein®® 和 Stoer™” 的 工作 ， 
有 趣 的 是 ,和 早期 工作 人 不同， BNE dl 然后 从 中 获 
得 Kubn-Tuoker 型 的 最 优 性 条 件 ， 

线性 规划 中 对 侦 性 的 经 济 解释 已 被 推广 到 非 线 性 凸 规划 .有 
兴趣 的 读者 可 以 阅读 Balinski、 Baumol, Gale™**"' ff, Williams” 
在 这 方面 的 著作 ，Williams H LFA TH RM, Bae 
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出 的 很 多 结果 给 出 经 济 意义 、 
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练 y 
SRR 上 的 具有 实 值 或 无 穷 值 的 任 将 函数 , TER Eee 
RAH. 
给 定 Br" 上 的 两 个 正常 凸 函 数 户 , fo 定义 它们 的 结合 函数 为 
(Fifa <r) =int {file ~y} tf) (5.186) 
W fi O fs Bo, Bi CURAE 
(Alfa CE = NE +f, (5.197) 


RHE SRR MBH, 


给 定 正 齐 次 凸 函 数 , 证 了 明 它 的 共 簿 函数 是 一 个 指示 函数 。 试 找 出 一 个 


指示 函数 , EA CHARGE — PR, | 


， 区 数 了 由 下 式 给 出 : 


fm) = [Ae (a) ys (5.198) 
其 他 ， 

其 中 zz 是 非 零 实 常数 , 证明 了 或 者 是 目的， 或 者 是 凹 的 , 这 取决 于 Pp 的 

值 , PR SSE, RY pot OM SAS 的 极限 情形 


: RE" 上 的 函数 了 称 为 可 分 离 的 , 如 果 


Se) = v1) + fo(ea) + t+ fn ty), (5,199) 
LEB CASE REL EY oy BY. 


. 设 4 是 4 阶 非 异 实 阵 , 5 fle 是 B" 中 的 向 量 ,a 是 实数 , 定义 子 为 


f(a)=flde—b) torst+o, (5.200) 
其 中 f Rw KF. 


- ER: 如 果 凸 规划 CPs) 的 扰动 函数 全 是 正常 的 , 且 0€ EBD(0)), 则 


规划 CPs) 是 稳定 的 . 


， 证 明定 理 5.16， 
， 讨论 例 5.2.2 PMR (De MEE. 


> 


$ 


pæ, w={ ZER, 270, WER, WO 
. +, 其 他 ， 
讨论 (P,) 及 其 对 偶 的 性 质 ， 


《5.301) 


， 为 什么 对 定理 5.22 的 第 二 部 分 我 们 要 求 中 是 团 的 ? 完成 其 证 明 ， 
,证明 定理 5.37。 


5 M. 
| SERA ORE 


5. 0. 


I. 


2. 


10. 


完成 定理 5.29 的 证 明 . 


min{ f(s) —g}, (5.202) 
其 中 了 和 9 分 别 是 RL OEM 函数， 以 了 E+tw) 代替 
F(z) 产生 拢 动 , 试 求 相应 的 对 侦 规 划 . 
给 定 原 有 凸 规划 
min f(s), | (5.203) 
RA f RAE RAR KOR RAPS AE, TAU AR 
为 


max{—*(A)}, (5.204) 

Rip K" È EK REPEC WA 3 Bt), 即 
E" = {AAE R", M>, Vcc BK}, (5.205) 
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在 前 两 章 中 ， 我 们 从 数学 规划 的 观点 讨论 了 凸 人 性 的 一 些 最 重 
要 的 方面 ， 对 那里 所 介绍 的 结果 来 说 , 凸 性 是 一 个 充分 条 件 ， 但 
EREE, 它 决 不 是 一 个 必要 条 件 ， 在 本 章 中 , 我 们 要 扩充 凸 性 的 
概念 . 从 而 使 先前 所 得 的 大 多 数 结果 能 容易 地 被 推广 . 

本 章 讨论 的 主题 仍 在 发 展 , 实际 上 , 这 个 方向 上 的 研究 已 构成 
数学 规划 的 当前 趋向 之 一 。 幸而 , 研究 是 集 和 凸 函 数 时 所 引进 的 
TR, 在 把 前 两 章 的 结果 推广 到 某 些 类 型 的 非 凸 规划 上 去 时 ,一般 
说 是 足够 的 . 这 样 的 推广 是 很 直接 前 ， 因 为 我 们 从 凸 分 析 中 已 了 
解 到 有 适 望 获得 哪 种 结果 ， 因此 , 我们 仅 介绍 关于 凸 性 各 种 推广 
的 基本 思想 , 有 兴趣 的 读者 能 据 此 导出 更 完整 的 理论 . 下 一 章 , 我 
们 将 利用 本 章 和 前 几 章 的 结果 , 分 析 一 些 特殊 的 非 线性 规划 . 

除了 广义 凸 分 析 还 需要 研究 之 外 ， 更 需要 在 寻找 非 凸 最 优化 
问题 的 有 效 数值 解法 方面 进行 研究 ,甚至 在 非 凸 算法 领域 中 , 广义 
凸 性 的 影响 迄今 尚未 感觉 到 ， 我 们 希望 ， 本章 介绍 的 结果 将 促进 
未 来 的 工作 , 以 发 展 新 的 数值 方法 , 并 扩充 关于 广义 凸 最 优化 问题 
的 现 有 方法 的 收敛 性 结果 . 


6.1 POaRAAo As 


给 定 XR FAP RAR S SRR, EX FKF 
HSF, aA 

S(f, a)={e:2e€ X, f(x) <a}, (6.1) 

容易 证 明 , FA ROR SAAR, WHG acR, Sf, a) 

PEDE. 反之 , 假设 现在 对 于 某 个 f, CHSC, 0o) 对 每 个 a€BB 

都 是 凸 的 , 由 此 是 否 可 推出 是 古 的 ? 读者 能 立即 否定 这 个 断言 . 

简单 的 例子 是 X= {ere k, 20 和 和 问 函 数 了 (2)==(w)*?， 即 使 
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如 此 ,我 们 仍 能 用 即将 给 出 的 凸 性 的 第 一 种 扩充 , 来 刻 划 水 平 集 均 
为 凸 集 的 函数 的 特征 ， 

ELEDE XCR 于 的 实 值 艇 数 了 称 为 是 拟 凸 的 ， 如 果 对 
FER VEX, PECK il ¢ (IZ. PL BPRHEMDA 

Finus tga) <max[ f (2), FP), (6.2) 

BA, 每 个 实 值 的 凸 函数 都 是 拟 凸 的 , 但 反之 不 然 ， BRS RAR 
FORD Ay, 如果 了 关于 氢 凸 函数 的 第 一 个 结果 是 下 列 
定理 . 

定理 6.1 

设 了 是 定义 在 凸 集 XC KHAAA, Wet ac R, f 
的 水 平 集 都 是 凸 集 的 充分 必要 条 件 为 了 是 氢 凸 函数 .， 

“” 【征明 】 设 对 每 个 a€ 有 RS(f, a) REAR, ESPE, 
ee X, a=max| f(s), f(a], WESS, a), PESC, a). 
因为 SCf,，a) BA, Mi A ERR a 也 有 tga’) E 
SCF, a). 

因此 ， 

fliget gar) <a = mar, f(a"), Fl. (6.3) 

RZ, SSC, 中 是 了 的 任意 水 平 集 . BZres(f, a), PE 
S(f,a), 则 


F(a") <a, ft)<a. (6.4) 
因为 了 是 拟 凸 的 , 我 们 有 
fipa + goa?) <a, (6.5) 


因而 (qv tga) ES(f, a). J] 

具有 凸 水 平 集 的 函数 曾经 由 de Pinetti HI, thy ae 
后 来 被 Fenehel3y 推广 和 校正 . 

图 6.1 说 明了 凸 沙 数 和 拟 凸 函数 之 间 的 一 些 主要 差别 ， 与 囊 
函数 相反 , 拟 凸 范 数 在 它 的 定义 域内 部 可 以 有 不 连续 性 , 而 且 并 非 
每 个 局 部 极 小 必 是 一 个 整体 极 小 。 然而 , 非 整 体 的 局 部 极 小 不 能 
SEP Fi TRAN, 这 一 点 我 们 能 在 下 述 结果 "中 看 到 ， 

定理 6.2 
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fix) 


图 名 .1 一 个 拟 凸 函数 


BSED ICE 上 的 拟 凸 函数 . E 个 是 了 的 一 个 严格 
局 部 极 小 值 点 , WW a? 也 是 了 在 邓 上 的 严格 整体 级 小 值 点 . 
【证 明 】 AAEE, 
N,(2*) ={a:2€ R", |e—a"| <8}. (6.6) 
Bo E+ PRR) ADESSO, 使 得 对 集合 
X NN PRB w ha" H . 
Ff (2) >f(2"). . (6.7) 
现在 设 o* BES TEX LP eA MABE oe X, 
TAa", 使 得 


F<f(e"), | (6.8) 
FRAME, MAAR 4 有 
f(q2+qu0") < f(2*), (6.9) 
但 对 于 充分 小 的 go (tq) EXON a"), 这 就 与 (6.7) 相 矛 
a. 】 
著 氢 凸 西数 是 可 微 的 , 则 能 导出 进一步 的 特性 ， 
定理 6.3 i 


B FERDE LCR FAY MH, M 了 是 拟 凸 函 数 的 充 要 条 
HA, SHERPA EX, CCX, WE 
FS), (6.10) 
就 必 有 
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(a ~ a)" oy fF <0, (6.11) 
THE) BS RW, ce X, PSX, Whet)<f(2?) 
蕴涵 ; 对 任意 人， 1> 和 >0 有 


JOs) f (27), (6.12) 
为 了 是 可 微 的 , 得 
Df (a; a — a?) = (e—a) "y f (a), (6.18) 


又 有 
Df (2, at — g?) = lim Loli Mela) Fe) : (6.14) 
Fy (6.12) (6.14), 可 得 
Df(a*, a — g) = (z*—2*)"v f(a) <0, (6.15) 
RZ. RF") < f(s?)， 又 设 存在 一 个 =Aw1 填 (1 一 A) 
(O<A<1), 使 得 


f(a") < f(a), (6.16) 

则 根据 假设 , 有 

(2 一 06)7V f(2*) <0, (6.17) 

(a1 —2*)"y f (a5) <0. (6.18) 
把 x* Bi ot Mo? HAS, 代入 (6.17) 和 (6.18), 整理 后 得 

(a? — 27)" yf (2*) <0, (6.19) 

(a — a)y f(a?) <0, (6.20) 
因此 

(e) fa), (6.21) 

定义 


U = {a: f(a) sj)，z 一 Ha 二 (G-p), 1>>0}, (6.22) 
于 是 我 们 能 找到 最 接近 于 w 的 一 个 CU. VRB AE Be, 
BERS) @° FH e ZA 2, 使 得 对 于 某 个 io lewd, 有 
F) =f (@°) + (—2°)" VF) (6.23) 
= f (10) + u (aa) "vf (a), (6.24) 
因而 
f(a?) =f (a) +A (ata?) of (2), (6.25) 
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因为 也 是 7! 和 zz? 的 是 组 合 ， 且 f(z2) <f(@), Mahe. 
(6.21), 可 推出 | 
(a) ~-9?)T yf (2) 一 0. (6.26) 

因此 f(o*) =f (a9) < f (27), 这 就 与 (6.16) 相 矛盾 J 

对 拟 凹 情况 , 不 等 式 (6.10) 和 (6.11) 中 的 不 等 号 要 反 向 . 

在 二 次 可 徽 函 数 的 情形 ，Arrow、Fnthoven'c 导出 了 用 半数 
的 如 边 行列 式 玫 示 的 在 Pr 的 非 负 象限 上 拟 凸 性 的 充分 必要 条 件 . 
这 些 条 件 后 来 由 Ferland’? 扩充 到 更 一 般 凸 集 上 的 函数 .一 个 二 
KAAR S EA E R Abhy IMM ARCS, 32) 定义 
A l 


e «Ff OF 
Oa, Oy , 
of OF .oO 
D,( f, wr)=detl Oa, 0a0a ôT ðs, |, k= 1, e,n 
af f | _ af 
= On O04, 0D 00,02), 
(6.27) 


如 果 集 合 XCR 具有 非 空 的 内 部 , 称 它 为 实心 的 (BR" 的 非 负 
象 腿 显然 是 实心 集 )， 函 数 了 在 实心 凸 集 ACH 上 是 拟 凸 的 必要 
条 件 为 : MBP BEX 有 


DCF, £2) EO0, &=1, ---, n. (6.28) 
sb, of ERO RACH FEW, 则 对 每 个 ZE X A 
(—1)*Di¢ f, a)=0, k=l, =, n. (6.29) 


反之 , 考虑 在 包含 凸 集 AICE H—THREHOKER A AK 
ARS. BMS eEX 有 


D,( f, z) <0, k=1, trey h (6.30) 

WWF EX EHH, AMT EX 有 
(—1)"D f, 2)>0, k=1, set, Thy (6.31) 
mrX BBW. i 


让 我 们 增强 拟 凸 性 的 要 求 . 定义 在 凸 集 ACR EAX A 
14a 


Me 


ere 


RPRAL BARON, MEERE, CX, ata, AEE 
意 权 gi > 0, ga>O, aitg=1, 有 

f(g + qa?) <max[ f(a), f]. (6.32) 
对 于 这 种 函数 , 由 上 述 定义 立即 推出 下 述 结 果 . 

定理 6.4 

定义 在 凸 集 XCRH LHR DMRS, 至 多 在 一 点 达到 它 在 
X EF RMA. 

EE BE A Sy HG ES PS tt SY. 

ARE yee EAS. 定义 在 凸 集 X CR 上 的 实 
值 函 数 了 称 为 是 严格 拟 凸 的 , 当 且 仅 当 ; tC NX, PC XY H 
FO) +I?) 的 两 点 和 对 任意 9q 汪 0，@>0， atgal 成立 
(6.32) 式 所， 容易 证 明 , 凸 函数 和 强 拟 西 函数 也 是 严 烙 拟 凸 的 ， 
虽然 强 拟 点 函数 也 是 氢 同 的 ,但 严格 拟 西 隆 数 不 一 定 是 拟 凸 的 , 因 
为 函数 

l 1, z=0, 
fel x0 
EX=R EPR, AERA OM. AMEA, YR 
Be PAE SEM, PRE HEE) PRA 
了 严格 拟 上 是 函数 的 很 好 的 性 质 ， 

定理 6.5 

RPREARACR be we, oe X BSH — 
a PBR ME ek, M a HE f TE X 上 的 整体 极 小 值 点 . 

证 明 十 分 类 似 于 定理 6.2， 从 略 . 在 这 一 章 的 后 面部 分 将 用 
这 个 定理 中 记叙 述 的 性 质 来 刻 划 函数 ， 

在 第 3 章 中 我 们 知道 , 对 一 般 非 线性 规划 , 若 无 某 些 正则 性 条 
tF, 则 最 优 解 的 Kuhn-Tnoker 必要 条 件 可 以 不 成 立 . FEC BL 
形 ， 第 4 章 所 述 的 强 相 容 性 的 Slater 条 件 保 证 了 这 些 必要 条 和 件 在 
最 优点 确实 成 立 . Arrow、Fnthoven 久 和 Arrow.’ Hurwicz、 
Uzawa 已 经 把 Slater 条 件 以 及 定理 4.39 扩充 到 更 一 般 的 规划 . 
设 有 一 个 在 3.1 节 中 定义 的 非 线 性 规划 (P), 它 的 约束 为 


(6.33) 
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g(t)0, 4=1, ---, m, (6.84) 

hy(w)—0, j=l, +, p, (6.35) 
HoP g A As SSH Hy TT GA Le Pe. A A R 
是 强 相 容 的 一 一 即 存在 一 个 LER, CBE (6.34) Al (6.35) 两 
式 , 使 得 不 等 式 都 是 严格 不 等 的 , HA, 的 系数 向 量 是 线性 无 关 的 ， 
又 

Vgl) A0, tEIl)= {i: gs") =0}, (6.88) 
那 未 原来 对 凸 规划 导出 的 定理 和 .39， 在 这 个 更 一 般 的 和 情况 下 也 成 
3. 

这 里 要 注意 , (6.34) A 6.35) A rE 如 之 集合 为 一 止 集 ， 
因此 ,如果 求 凸 函 数 在 这 些 约束 条 件 下 的 极 小 , 则 每 个 局 部 极 小 也 
是 整体 极 小 .这 个 结果 以 后 将 推广 到 目标 函数 为 其 他 类 型 的 情 
形 ， 还 要 注意 ， 具 有 拟 旧 约束 的 一 般 非 线性 规划 可 以 具有 这 样 的 
A, 它 不 是 整体 解 , 但 满足 最 优 竹 必要 条 件 ， 关 于 凸 函数 与 拟 凶 冰 
数 性 质 的 有 趣 的 比较 , 读者 可 人 参看 Greenberg, Pierskalla?”, 

现在 我 们 转向 凸 性 的 另 一 种 扩充 ， 它 是 由 Mangasarian® 0 
引入 的 . 

Hy PAY SEA FRA EH RY CR EEA, 如 果 对 
FERIA ot EX, PEX, 8 FIE: 

(at — 27)? Vf (a?) 0 Ai f(a) f(2), (6.37) 
函数 了 称 为 是 以 目的 , 如果 一 f 是 仿古 的 , 或 等 价 地 , (6.37) PAY 
两 个 不 等 式 均 反 向 . 如 果 了 既是 伪 凸 又 是 伪 耻 的 , 有 时 称 它 为 伪 
线性 的 .有趣 的 是 含有 线性 函数 的 数学 规划 的 某 些 性 质 能 推广 到 
含有 伪 线 性 函数 的 规划 上 去 33933， 可 微 的 山 函 数 是 伪 凸 的 , i 
函数 全 是 严格 拟 丁 的 、 AM, 伪 凸 函数 的 每 个 局 部 极 小 也 即 是 整 
体 极 小 。 虽然 严格 拟 凸 函数 可 以 有 志 留 点 , 在 那里 梯度 为 0， 却 并 
不 是 整体 极 小 值 点 , 但 这 种 情况 对 伪 凸 函数 却 是 不 可 能 的 ， 

定理 6.6 

设 了 是 开 凸 集 互 和 下 上 的 伪 凸 函数 ， 又 设 对 某 个 品 E 工 ， 
vf") =0, U et Ze fF EX EAR AREA, 

Idd 


【证 明 】 由 伪 凸 函数 的 定义 可 立即 推 得 ， 下 

Ferland 证 明了 ， 对 二 次 连续 可 微 函数 ， 前 面 讲 到 的 以 行 
列 式 形式 给 出 的 拟 赂 性 的 充分 条 件 , 也 是 伪 唔 性 的 充分 条 件 。 他 
AT, WR f ERO MR XCR 上 是 二 次 可 微 的 拟 凸 函数 ， 
则 了 在 任何 zeE X, Vf) KE he. 即 对 每 个 GE 区 
(2 一 7 Vf) 0 Bi f(x) af (2), 

我 们 能 对 伪 凸 函数 作 进一步 的 限制 ， 要 求 (6.37) 中 被 推出 的 
不 等 式 对 w! 天 2 是 严格 不 等 的 ， 在 这 种 情况 下 ,该 函数 称 为 严格 
AAR, 而 定理 6.6 就 能 更 强 地 叙述 成 ， 如 果 wj(z") =0， 则 
a 是 了 在 并 上 的 唯一 整体 极 小 值 点 ， 要 想 考察 至 今 所 定义 的 各 
类 广义 凸 通 数 之 间 的 关系 , 读者 可 参看 Ponstein""， 那 里 还 研究 
了 更 多 的 广义 凸 函数 类 . 

我 们 现 要 证 明 ， 对 于 定理 3.8 所 述 的 非 线性 规划 中 最 优 性 的 
Kuhn-Tucker 必要 条 件 ， 当 目标 函数 和 约束 画 数 都 是 某 种 类 型 的 
广义 西 函数 或 广义 四 函数 时 ， 它 也 是 充分 条 件 ， 下 面 结果 则 是 定 
理 4.38 之 推广 考察 非 线性 规划 : 


(PQP) min f(z) (6.38) 
受 限制 于 约束 | 
gla, i=l, =, m, (6.39) 
hj(a)=—0, 了 一 二 +, P. (6.40) 
象 以 前 一 样 , 令 
T(co) = {é:g,(2°)=0, t=1, =, m}. (6.41) 


于 是 我 们 有 下 述 结 果 "*. 它 的 另 一 种 稍 加 限制 的 形式 可 在 [2] 中 
找到 ,那里 还 讨论 了 所 是 性 的 经 济 学 方面 的 内 容 . 

定理 6.7 

BEF, gas st) Im Filly, oo, ho KEFERA OR VCR" EBA 
PR. 假设 了 是 伪 凸 的 ,go EIDEM, Til hy BE 
拟 凸 又 是 拟 凹 的 、 MRE EMER PER, HBP HMR 
OY: 


了 


oe ek ee. A 
VIE- Sinoga) —Sujhy(a*)=0, (6.42) 


Moa") =0, ¢=1, =, m, (6.43 
g(a") 0, G=1, +++, M (6.44) 
Aye") =0, 7 一 王 =, p, (6.45) 
MoO, (6.46) 


那 末 2 是 (PQP) 的 整体 最 优 解 . 
【证 明 】 pecx AR (6.30) A1(6. 40) 的 任 一 点 , 则 


(Pg), EI, (6.47) 
h(x) =h; (a), j=l, =, p. (6.45) 
因此 有 
(o=) V gla, LEN), (6.49) 
(æ—a") y h;a") =0, j=1, --, p, (6.50) 


XREF ETH M =O, 由 过 得 出 
(=a) {3 Av Ha) Evaa }>0, (6.51) 
又 由 《6.42) 便 得 
(a—~a")? 9 f (a*)=0, (6.52) 
因为 了 是 伪 凸 的 , HH (6.37948 f(m)>f(e"). 1】 
Minch 定义 了 实 什 函数 六 的 对 称 梯度 产 (zc)， 用 它 来 扩充 
可 微 的 旧 、 伪 凸 和 拟 凸 函数 的 概念 。 在 一 个 变量 函数 的 情况 下 ， 
f(a) A PRAM, 
- fiw) = lim MOER ie) ; (6.53) 


这 里 假定 上 述 极限 存在 . 例如, 函数 f(z) = jz| 在 2 一 0 处 是 不 可 
微 的 , 但 是 它 在 那里 上 共有 对 称 梯度 产 (0) 一 0。， HF ARMS 
所 讨论 过 的 它 的 扩充 ， 把 通常 的 梯度 换 成 对 称 梯度 ，Mineh 已 得 
到 了 类 似 于 可 微 情形 的 结果 ， 

附带 提 一 下 ， 同 函数 在 对 策 论 的 所 谓 极 小 极 大 定理 中 也 起 重 
要 的 作用 ， 这 些 定理 中 的 第 一 个 在 1928 年 由 yon Neumann 叙 
述 ， 后 来 这 些 定理 被 推广 ,证 明了 对 于 拟 同 函 数 情 形 也 成 立 , 参看 
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Berge”), Nikaidôt™®, l | 
尽管 前 面 所 讲 的 一 些 结果 有 明显 的 作用 ， 但 是 确立 函数 的 拟 
邮 性 和 伪 凸 性 的 困难 问题 恢 然 存在 这 种 困难 在 于 这 些 函 数 类 的 
定义 中 ， 因 为 它们 一 般 包 含 着 检定 无 限 多 个 不 等 式 、 最 然 ， 判 定 
一 个 是 小 数 也 存在 同样 的 困难 ， 然 而 ， 在 适当 的 笨 件 下 ， 测 定 一 
个 复合 函数 所 属 类 别 是 可 能 的 ， 现 在 较 详 细 地 研究 这 个 问题 
以 下 结果 主要 归于 Mangasarian™, 另外 ， 更 一 般 的 结果 已 由 
Schaiblerts, 妈 1 得 到 ， 
EXER TOR xR AVR RAT FR 
递减 ( 增 - 减 ) 的 , 当 且 仅 当 对 任意 (y', DET, a, DET 有 
poy Me< Be Oy, A)>d(y’, 2). (6.54) 
同样 ， 史 称 为 在 下 上 是 yey, 4 AI ERG’, 2) 
ET (YL DET A 
yoy 蕴涵 diy, pl, z). (6.55) 
从 全称 为 在 TT 上 是 六 -递减 (y- 减 ) 的 , 4 AA EL, 
(网 DETH 
yxy AB pa, >p, 2), (6.56) 
从 这 些 定义 即 可 得 出 下 述 结果 ， 
引 理 6.8 
Heb BELFER TCR" XR LAVAS, NoE 
TZ 上 是 增 - 减 的 充分 必要 条 件 为 , 对 每 个 (y, YET 有 
Vly, 220, Vly, 2) <0. (6.57) 
FERDA THER, : 
定理 6.9 
HICH 是 一 西 集 , jz) =( Fi (2), , fm (@)) Meg (2) = 
(gila), 0, PEELE E k, p EE RxR EW RH, 
定义 l 
O(a) =o( f(a), g(r)). (6.58) 
如 果 下 述 假 定 中 有 任意 一 条 成 立 : 
(i) 子 是 凸 的 ,9 FMW, 中 是 增 - 减 的 ， 
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Cit) 了 是 线性 的 ,9 是 线性 的 . 
(iii) FÆR, g 是 线性 的 ， 风 是 扩 增 的 . 
Civ) 了 是 四 的 ，9 是 线性 前 ， 史 是 针 减 的 。 
AB . 
(a) $ p Fen, WOH. 
(b) EXER, fAGEX LAMA, 6 BH, 则 
D ERÉ. 
(e) WR o EMR, MO BAY. 
【证 明 】 对 定理 4.12 略 作 修改 就 能 证 明 上 述 部 分 (a)， 我 们 
DUE TEEGE (1) FRERAO). BAEK, EX, W 
(2? —21)" VG (a) = (a? — 2) [vf vp F (24), ga) 
tygla) VOC f(a"), ga). (6.59) 
由 (4.116) 和 引 理 6.8, 可 得 
(AVD <[ f(a) AVAF), ga) 
+ [g C2) —g (VSC), ga) ). (6.60) 
因此 , 如 果 (6.60) 的 左边 是 非 负 的 , 则 右边 也 是 非 负 的 ; 再 由 中 的 
伪 西 性 可 得 
PSE), g(a") EB F(x"), g), (6.61) 
Heep 
D(a*) <D(a7), (6.62) 
Am EAn. EA REA EMER EE dE), (ati), (iv) F264} 
(b) fy HERB. 


现在 在 假定 (i) 下 证 部 分 (6). 
ReEX_ PEX, a. gah. FHF O(2*)<G(2*), mi 
PCS), g(@)) EG F{2"), g(e")), (6.63) 
A > Je aA, A 
bq F(a") 十 ga f(a"), 19 (a) 十 gag(22)) S$ f(a), g(a?)), 
(6.64) 
再 根据 假定 , 可 得 到 


PCF (qe! +900"), glg + gm) Ep f(x"), g(a*)), (6.65) 
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此 即 
(girt gar’) << D(a"), (6.66) 
Ani? ROY, 证 明之 余下 部 分 是 类 似 的 .了 
定理 6.9 能 应 用 于 一 大 类 函数 ， 首 先 考虑 非 线性 分 式 男 数 ， 
eX fe RN, Al EX ERM, 又 设 
O(a) -RE (6.67) 
Rep RE PE AAA XO 上 成 立 : 
， Ag ZEAE ANH; by ZTE BMD, 
. 如 是 非 正 且 四 和 的， 如 是 负 且 此 的 . 
. Ay ARIE BSH; h BIER. 
， Ay FASE BM; A fe AE, 
. 如是 线性 的 ; 如 是 非 零 且 线性 的 .， 
. h EIEREN h FECR. 
， 和 是 非 负 且 线 性 的 ; hE HN. 
. ry FE; 各 是 正音 线性 的 . 
. 加 是 目的; 加 是 负 且 线性 的 ， 
MOG X EWAN. AS, GX BAW, VA le eX b 
二 可 微 的 , 则 多 也 是 伪 凸 的 . 
其 次 , 考虑 倒数 函数 设 


oon oOo a Fe WSO Hw 彤 


B(x) “ey (8.88) 
hte X ERE AMY, WO AX LENK, BAX LBM 
Broa, WS Ze xX ERE. 

定理 6.9 HAGMAN TERE. BX CR IER, 
hy 和 为 在 三 上 是 可 微 的 , 定义 
Pla) =hy(a)ho(x), (6.69) 
Ri fe FRE CL) RQ) FS BH, 
1. h SEIS; A EEA. 
2, h RRB; h BARA BPAY, 
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rm 


关于 这 些 结果 之 扩充 能 在 [43，44] 内 找到 . 

AY EASES OR RZ SE, 能 通过 检定 关于 它 前 Hesse 8 
PERS TRKE., RT ee BS TE = 
Ke, Pin, 两 个 变量 的 函数 

9(2) 一 一 2ata (6.70) 
对 于 21 这 0、 ss 之 0 RWW, 但 它 并 不 是 凸 的 . 类似 于 是 的 情形 ， 
为 了 检验 二 次 函数 的 伪 凸 性 或 拟 凸 性 , 已 经 导出 了 有 限 检验 准则 ， 
W, Cottle, Ferland”: 1, Ferland?® 和 Martos®®, “Fmasiiedst 
于 这 些 参 考 文献 , 结果 的 证 明 能 在 那里 找到 . 

我 们 从 孝 类 矩阵 的 定义 开始 . 对称 实 矩阵 @@ 和 它 的 二 次 型 
e 称 为 是 次 正定 的 , 如 果 


a"Qn<0 蕴涵 Qo>0 R Qa<0, (6.71) 
称 为 是 严格 次 正定 的 , 如 果 
aTr <0 Ah Qz>0 或 Qz<0. (6.72) 


MZF, Ae 称 为 是 半 正 定 的 , MRR CER A eRe 
0, 或 用 类 似 于 上 上 述 两 个 定义 的 形式 表示 为 . 
TUO 蕴涵 Qz 一 0. (6.73) 

对 于 二 次 型 wRw 的 同性 而 审 , 半 正定 性 是 一 个 必要 充分 条 件 . 前 
三 类 矩阵 定义 之 比较 ， 说 明 半 正定 移 二 次 型 (平凡 地 ) 是 严格 次 正 
定型 , 从 而 也 是 次 正定 的 . -AKARE R, 如 果 是 (严格 ) 次 正定 
但 并 非 半 正定 的 , 则 称 它 为 (严格 ) 仅 次 正定 的 、 类似 地 , RIIA 
Bee MI CR aS) HY, 如 果 它 是 拟 凸 ( 仿 凸 ) 但 非 丁 的、 于 是 , 我 
们 有 下 述 基 本 结果 . 

定理 6.10 

二 次 型 wez 在 非 负 象限 上 是 拟 凸 的 ， 当 且 仅 当 它 是 次 正定 
的 ， 它 在 不 包 仿 原 点 的 非 负 和 象限 上 是 伪 西 的 ， 当 且 仅 当 它 是 严格 
次 正定 的 . 

这 个 定理 的 证 明 能 在 [32] 中 找到 . 

Martos KY F RAR ERO CKKRER LEA 
数 的 一 种 简单 方法 . 
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定理 6.11 

AEAE TAR EA Re a Qe 是 不 含 原 点 的 非 负 条 
PRERIO ee, 当 且 仪 当 和 矩阵 旬 并 不 包含 一 行 零 . 

现 让 我 们 转向 刻 划 仅 次 正定 的 矩 取 和 一 次 型 的 特征 . 

定理 6.12 1 

二 次 型 2*8z 是 仅 次 正定 的 充分 必要 条 件 为 ; 
~ Ci) 上 矩阵 外 的 每 个 元 素 荐 非 正 的 , 而且 名 中 至 少 存在 一 个 货 
元 素 . 

Cit) 如 的 所 有 主子 阵 的 行列 式 都 是 非 正 的 。 

这 个 定理 的 证 明 见 Cottle, Ferland?®, 

最 后 , RING Wi SEM RARE. 

E 6.18 

WS SRO HS TIRE SEIENM, TM BQ RPE 
一 个 负 元 素 。 如 果 包 的 所 有 前 主子 阵 的 行列 式 都 是 负 的 ， 则 eRe 
是 严格 仅 次 正定 的 . 

定理 6.12 通过 主子 阵 的 行列 式 提 和 拭 了 检验 非 负 象限 上 二 次 
型 拟 凸 性 的 一 种 有 限 的 检验 准则 .在 一 定 意义 上 , 这 种 检验 准则 
是 关于 半 正 定性 的 类 似 检 验 准 则 的 补充 。 REE Z K W aao 
的 另 一 有 趣 的 性 质 是 ,8 恰 有 一 个 负 的 特征 值 ( 单 重 ), 且 它 对 应 的 
特征 向 量 或 者 是 非 锡 芍 或 者 是 非 正 的 , 但 它 并 不 是 零 . 我 们 这 里 
简短 地 提 一 下 仅 氢 辐 性 的 条 件 ， 

1. 矩阵 久 的 每 个 元 素 都 是 非 负 的 , 且 鱼 中 至 少 存 在 一 个 正 的 

2. 以 了 wx 玫 示 岛 的 第 了 个 天 阶 主子 阵 的 行列 式 , 则 对 每 个 名 
(—1)" Da 都 是 非 正 的 . 

二 次 函数 一 般 是 由 一 个 二 次 型 与 一 个 线性 函数 之 和 组成 的 . 
WMR KREDKA, MERMADA. TREE i RA 
函数 与 线性 函数 之 和 就 不 一 定 是 催 凸 的 或 氢 西 的 . 然而 有 关 二 
次 型 的 以 上 结果 已 被 推广 到 二 次 函数 "玉环 井 ,这 些 结果 概述 于 
Pe 


tsr 


定理 6.14 
设 了 为 二 次 函数 
f(z) -17z 十 二 orQz，zERBn， (6.74) 
则 了 在 Br 上 是 是 的 充分 必要 条 件 为 它 是 拟 凸 的 ， 令 
5 
a-[% ，] (6.75) 
W F PEAK HA PE AY Fh EE ED IE 
W. E F FEE RAP EE OO, 则 了 在 非 负 象限 上 也 


是 伤 凸 的 . 
例 6.1.11% 
考虑 二 次 型 
fils) = — (+ 22)’, (6.76) 
写成 
fale) =27Qe, (6.77) 
其 中 
—i -1 
ea-[ _ al (6.78) 


Q 的 特征 信和 基 江 = 一 2 和 一 0， 且 对 应 外 的 特征 向 量 作 一 (1， 
1)’, 这 个 二 次 型 是 非 凸 的 , 因为 Q@ 不 是 半 正 定 的 ( 它 实 际 上 为 半 
负 定 的 ) ， 然 而 , 根据 定理 6.12, BRO 是 仅 次 正定 的 .因此 , 根 
据 定理 6.10, 函数 fi 在 非 负 象 限 上 是 仅 拟 上 是 的， 并 且 , 根据 定理 
6.11, 它 还 是 仅 伪 凸 的 ， 现 在 考虑 二 次 函数 


fale) = -a — ra= (0 Ha)’, (6.79) 


H (6.75), 我 们 有 
| 
-| = —1 =| (6.80) 


-1 -1 0 
读者 容易 验证 名 是 仅 次 正定 的 ， 因 此 , 根据 定理 6.15, EFRR 
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RE, 这 个 二 次 函数 是 仅 拟 凸 和 仅 盆 凸 的. 1 

显然 , 当 四 性 是 充分 但 非 必 要 的 时 候 , 引出 诺 如 伪 凸 性 或 拟 上 是 
性 的 推广 , 可 能 获得 分 析 和 计算 上 的 好 处 . 如 果 一 个 数学 规划 中 
的 函数 是 非 凸 的 , 但 又 “ 仅 ” 咯 于 前 面 讨 论 中 曾 提 到 过 的 函数 类 之 
- +, CIN, 这 些 推 广 的 研究 是 特别 有 帮助 的 ， 这 样 一 些 通 数 有 时 能 
用 某 个 非 线性 变换 把 它们 变 成 凸 函 数 ， 这 个 问题 将 在 下 一 节 中 研 
究 . 

在 结束 这 一 节 时 我 们 要 提 一 下 有 关 Beckenbach™, Becken- 
bach、Bing"0 的 工作 , 在 那里 凸 函 数 是 用 “次 - 吾 明 数 ”概念 加 以 
推广 的 . 这些 工作 的 主要 结果 也 见 Berge”, 


名 . 乙 ” 弧 式 连通 集 和 可 变换 为 凸 的 函数 


我 们 现在 以 另 一 种 观点 来 推广 凸 性 . 在 第 4 章 中 , e 的 一 个 
子 集 O 定义 为 凸 集 ， 如 果 对 于 C 中 任意 两 点 ， 连 结 它们 的 直线 段 
也 在 C 中 . 这 个 定义 能 加 以 推广 ， 代 替 直 线段 我 们 要 求 对 于 0 
中 任意 两 点 ， 存 在 一 段 连结 它们 的 连续 曲线 全 部 在 集合 C 内. 这 
种 观点 在 分 析 申 是 热 知 的 ,能够 表述 如 下 : 

集合 SCR BARU AY, WR TF E OR ot CS, 
AES, 都 存在 一 个 定义 在 单位 区 间 [0, 11 CR EM, RS 中 向 量 
为 值 的 连续 函数 Po, or, 满足 

Pa, e(O =, Paal) (6.81) 
就 称 peo 为 连通 函数 或 跑 ， 注 意 De,o -BERTA A 2" 及 
集 和 8、 对 于 一 个 弧 式 连通 集中 的 一 对 点 一 和 吧 可 以 存在 多 于 一 
个 连通 函数 . HT co =o CS, 我 们 能 选取 


Pael) =, OSOKI, (6.82) 
6.2.1 
BR, CAMAMRBBR, 而 函数 
pe, o(8)=(1—O)at+60", O0<6<1 (6.83) 


是 凸 集中 任意 两 点 的 连通 函数 . 现在 考虑 中 心 在 原点 、 半 径 为 了 
之 图 的 外 部 点 的 集合 SCR’, 即 


HF 


et 


AM) Yi 


a A ] 
i a r > yA 


6.2 加 的 余 集 是 弧 式 连通 的 
= { (%1, a)! (a2)? 十 (za)22 (r)7}, (6.84) 


FEM FER BR 2 C82, PES, 用 极 坐 标 表 示 的 下 列 函 数 是 连 
18 28 ge: 


i 


1— 1 2 fu 14 pa? 
Po(8)=| 11 Arit Or ont cd 十 bu | javai 
[(1—0)r!+8r’°]sin((1—#)at+ 6a?) 
(6.85) 
其 中 
i= cosa’, a—r'sina’, ¢=1, 2, (6.86) 


六 而 S: 是 弧 式 连通 集 ， 人 参看 图 6.2， J 

弧 式 连通 集 与 连通 集 是 密切 相关 的 . 尤其 是 , SPARED 
集 都 是 连通 集 , 而 每 个 开 连 通 集 也 是 弧 式 连通 集 ， 我 们 提醒 读者 ， 
集合 DORM 称 为 是 不 连通 的 ， 如 果 存 在 两 个 开 集 4、B， 使 得 
AN DM BND 是 不 相交 的 非 空 集合 ， 而 且 它 们 之 和 和 集 为 D， 车 
R 之 子 集 不 是 不 连通 的 就 称 为 是 连通 的 .至 于 更 详细 的 内 容 , 读 
者 可 参看 Apostol”, Bartle’, Berge* sk Singer, Lhorpe*®, 图 
6.3 WH TMA RET. 

巴 函 数 的 上 图 象 和 有 效 区 域 都 是 西 集 , 另外 , 至 今 讨论 过 的 广 
义 凸 函数 的 定义 域 都 是 凸 集 . PERF EWA SMARA 
关 的 点 灿 数 的 一 些 新 的 推广 . 

定理 4.15 表明 一 个 函数 是 凸 函 数 的 充分 必要 条 件 是 , 它 被 限 
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图 6.3 弧 式 连通 集 


制 在 定义 域内 每 一 直线 段 上 时 也 是 是 的 . 当然 ， 这 个 论断 并 不 意 - 
味 善 出 函数 被 限制 在 山 集 内 其 他 强 上 也 是 廿 的， 假设 我 们 考 虚 这 
样 一 类 实 值 函数 , 它们 定义 在 弧 式 连通 集 上 , 而 且 它 们 被 限制 在 函 
数 定义 域内 某 些 弧 上 时 是 凸 的 (车 以 直线 段 作为 上 述 弧 , 普通 的 凸 
函数 就 成 为 这 样 一 类 函数 ). 若 台 是 这 样 前 函数 的 定义 域 ( 白 式 连 
WR), 对 于 每 对 点 ES CS, 设 互 。。 是 具有 上 述 性 质 的 弧 ， 
于 是 我 们 能 写 
FH e aO) <(1-68) f(a) Ho), OKAL (6.87) 
为 进一步 扩充 这 种 想法 ， 考 弄 这 样 的 函数 ， 它 可 以 是 非 同 的 ， 
但 能 用 茶 个 严格 单调 的 连续 旺 数 把 它 变 换 成 凸 函 数 ， 事 实 上 , 对 
于 每 对 实数 0? oF, 定义 On, oi 为 在 单位 区 间 [0, CR E, WHER 
PRELA et Oe, 它 满足 
Da, aO)=a, Oy a(t) =a, | (6.88) 
于 是 定义 在 弧 式 连通 集 S 上 的 实 值 函 数 户 PAREKH, WR 
对 于 每 对 点 mES、 Pes MO<@<1, 有 
F (Ha, m0)) SDren, pa), (6.89) 
ELNE Oh be BH) FER ANS SR (4.42) (6.89) ERIE, 其 中 ， 
& 
Hp alh) = (4—0) + O23, (6.90) 
Dras O) = (1-8) f C) + OF (a7), (6.91) 
KATILA A A ERI EB REFE Avriel, Zang 
All Zang's 中 找到 。 
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在 本 节 的 余下 部 分 , 我 们 将 考虑 弧 式 凸 函数 的 一 种 重要 子 类 . 
如 在 (6.90) 和 (6.91) 所 见 ， 在 晤 函数 的 定义 中 用 到 的 及 和 外 实 
际 上 分 别 是 一 对 点 ot, e 和 它们 相应 的 函数 值 了 (zr)，f(w”) 的 如 
权 算 术 平 均值 . 这 个 事实 启示 我 们 去 考虑 这 样 一 类 弧 式 出 函数 , 它 
的 Ae A Gye, pen 是 更 一 般 的 均值 函数 2， 我 们 现在 更 详细 
地 考察 广义 凸 性 的 这 个 方面 ， 
如 在 凸 旺 数 情形 一 样 ,我 们 假定 是 定义 在 R" 上 而 取 值 在 扩 
充 的 实数 集中 的 函数 , 即 f{zz) 或 者 为 实数 或 者 为 土 se。 以 前 所 定 
义 的 概念 ,诸如 闭 、 正 常 有 效 区 域 等 概念 这 里 也 将 用 到 ， RAR 
定义 存 包含 子 的 有 效 区 域 在 内 前 大 的 一 子 集 上 而 取 值 在 R 中 的 
连续 隙 数 ,并 设 部 到 信 域 上 是 一 对 一 的 . 同样 , 设 中 是 定义 在 扩充 
的 实数 集 的 子 集 上 严格 单调 的 连续 画 数 ， 该 定义 域 包含 地 的 有 限 
值 域 , 由 到 它 的 值 域 上 也 必 是 一 对 一 的 ， 注意 及 和 中 各 自 具有 单 
BPH PRA PP, WE RA (a) =k (a) =o FO 7*6(a) = 
ppl) =a, SURE Hon 为 更 -均值 函数 , 由 下 式 给 出 : 
Ha a(@)=h*[1—#)h(2") +6h(@*)], O<P<1, (6.92) 
同样 , 假设 Dron, yo 为 四 -均值 函数 
Dran re lO) =LA —-O) OF (2*) Obf, Oe, 
i (6.93) 
AAE R EHER MALE SEAE, 网)- 凸 的 ， 如 果 
对 于 每 对 ct CR, CR 和 0<0<1l1 有 
JAO) + Oho?) Sp (1 -O) pf (a) + Of (2*)]. 
| (6.94) 
我 们 现在 来 看 (h, 由 )- 凸 函数 的 一 些 例子 . 
例 6.2.2 
(a) 首先 , 取 Aw) <2, sE R 和 (a) 二 er, 其 中 7 是 一 个 非 
零 实 参 数 ， 于 是 代入 (6.94), 得 到 


F(A—O)a + 0a?) <log[(— 0)erre r+ Oot}. (6.95) 
满足 (6.95) 的 函数 也 称 为 ”- 凸 函数 ， 是 由 Avriel 和 Marios” 
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引入 的 . 
(b) 其 次 , 取 RB? 上 的 Rosenbrock “HH” RH, 由 下 式 给 出 : 
f(e) =100 faa — (e) PH (1—23)?, (6.96) 
3X Fé — TE BE BY PRY SE oh BS Bk, A — 4) BME a = (1, 
1), RMECAL AFM -PHERH EAA aww, wh 
Ph ee BBR hee Be. EKE, 如 同 在 图 6.4 所 见 到 的 , 它 的 水 平 集 
是 非 凸 的 “香蕉 型 "集合 ， 令 


= yea x 


-1 


图 6.4 Rosenbrock H iA ER 


hla) -( 10.m (a) 1 i (6.97) 
1~2, 
1—ft, 
mo-{ 1 i ) (6.98) 
To at Ch 一 如 ) 


X pla) =a, RP aC BR aE R, 我 们 得 到 
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Haat) =( (1—0)ai+ 623 } 
dj (1~6) [a —(oh)*] +0 [2— (29714 [1 —-O)e O29]? 
(6.99) 
读者 可 以 验证 ,对 于 O<P <1, 有 
F a, w(8)) < (1.0) f (at) +f (4), (6.100) 
事实 上 , 由 (6.98) 和 (6.98) 我 们 得 到 
bfh-* (6) = (H) + (ta), (6,101) 


这 是 一 个 凸 的 二 次 函数 ! 在 下 面 ， 我 们 将 看 到 这 个 结果 对 每 个 
Ch, p) - 凸 函数 都 成 立 ， 即 它们 能 变换 成 凸 函 数 ， (BAR HI 
等 函数 的 (2 力 )- 凸 函数 的 例子 .(b) 是 上 取 为 恒 等 肖 数 的 (办) 
凸 函 数 移 例子 ， 在 二 一 合 中 ,大 和 咱 将 都 不 是 恒 等 函 数 . 
(0) 设 了 是 辟 " 的 正 象限 上 的 正佳 函数 .定义 为 为 
7(z)，2>0， 
| bi E 
对 于 z>0, Ala) = (Jog s, o, log Ta). Xf a>0, Wole) = loga. 
HF Ai ARERR A o 和 0<9<1， 根 据 (6.94) 并 
加 以 整理 后 , WERA 
FECE)? (ei), oe, (RS Fo F(a?) )’, 
(6.103) 
ABA RNS fı 为 (liog，1log )- 凸 函数 .在 非 线性 规划 的 一 个 称 
A SU AA BR BY PR Td SCP BERT TE SRO 定义 为 


(6.102) 


g(a) => ct J (6.104) 
其 中 > 加 we R MERT, 30 FH PR Be BE AE Clog, log)-4 A 


数 . l 

(h, >) - 凸 函 数 最 重要 的 性 质 是 它们 可 变换 为 山 的 ， 换 句 话 ， 
正如 我 们 将 在 下 一 个 定理 中 所 见 到 的 ， 它 们 能 被 变换 成 凸 函 数 ， 
在 本 节余 下 部 分 ， 假 定 史 是 一 个 严格 递增 函数 . 我 们 的 基本 结果 
是 定理 6.15. 

定理 6.15 
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HRS ER LER, 由 )- 凸 函数 的 充分 必要 条 件 为 ， 由 
下 式 给 出 的 三 在 本 上 是 正常 凸 的 : 
Fy) =P). (6.105) 
【证 明 】 函数 在 R" 上 是 正常 (5 由 )- 凸 的 充分 必要 条 件 
H. WHER CR", oF CR, O<P<1, 成 立 
FRCL) h(a) +. Oh (0) )] <P IOP) + 9b f (27)1, 


(6.106) 
因为 由 是 严格 递增 的 , 我们 得 到 
pf [hI Oh) + 0h(a))]< (1B) bf (a) + Of (0). 
(6.107) 


令 h(s) =y, 并 代入 (6.107), 就 得 

pfh*(A—O)yt+8y*?) <(1—-8 pF (gy) Oph tr). 

(6.108) 

就 是 说 GFA FIERO. YJ 

引进 广义 的 加 法 和 乘法 运算 , a RAE SH e, p) iR 
数 的 许多 性质, 这 属于 Ben-Tal", 2k 2 为 定义 在 BB" 的 子 集 3 .上 
HY 7 SE ERR. ERAR MR, HEZ, yeZ, E 
X -向 量 加 法 为 
ay 一 2[2(2) +2(y)]. (6.109) 


MoE ZACK, EM 2Z-MIRA 
A@a~2[he(e)]., (6.110) 


类 似 地 , RoR MEOCR ENE RRR, CAA 
Meo", MAAE, BEO K w- 加 法 定义 为 


al +t]8 =o Lola) +o8)]. (6.111) 
对 a€Q ACR, » BBE LH 
ALela=atPola)), (6.112) 
最 后 , 对 向 量 eceZ, yeZ, (2, wo) -AREXH 
(vy) wor *[(2(a))*2(y)], (6.113) 
这 里 假定 上 式 右边 有 意义 . 


从 代数 观点 来 完整 地 处 理 这 些 运算 还 需要 更 广泛 的 背景 材 
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H. AMHR Sw NH. 
gj 6.2.8 
设 
z(e) = (log 24, …，10g £p), (6.114) 
并 设 
Z = {vi:z E R", c>0}, (6.115) 
则 | 
ey = [exzp(log rı t log y1), =, exp(loga.+log yn)]” (6.116) 


= (wy Gin)”, (6.117) 
对 于 和 ER, 有 
Ag = [exp (Alog 21), +++, exp(Alog 2,)]” (6.118) 
一 (op eee, Can) J] (6.119) 
容易 验证 , 均值 函数 也 都 可 以 写成 这 种 形式 , 例如 ， 
Hy, (8) =[A—-4 Or DOT) (6.120) 
和 
Du, (0) = [1—0 EJ] [+] Oia). (6.121) 


由 此 推 知 , 定义 正常 A, $)- ch HRS (6.94) 可 写成 
FLCA—8) OD @O2*)] 
< (1-8) [JF @) CAI CL] Ff a). (6.122) 
因此 , (h, 劝 - 凸 函数 在 上 述 广义 代数 运算 下 是 “ 西 的 ”， 
利用 这 些 运算 ， 我 们 看 一 看 怎样 把 前 几 章 关于 凸 函 数 的 结果 
推广 到 局 ,办 -后 函 数 上 去 .例如 , ER 4.10 表明 , 如 果子 和 9 都 
ELEA, AEH, 则 +9 MAS 也 是 凸 函 数 . 
相应 的 结果 为 : 了 和 9 BA, 办 -出 函 数 , KO, WF(+]9 
A ALI fh h, p) -OM. 我们 已 经 知道 ， 当 目 仅 当 一 了 为 和 
时 , feo, AR, 4BRAC-DCIS AG, 四 -由 时 ， 了 是 
h, 加 )- 点 的 。 ZARA ERNEAT, EAR OCR 上 的 可 徽 函 
数 了 是 凸 的 充分 必要 条 件 为 ， 对 任意 两 点 rEC、 PEC, 
ft) FP) 十 (全 一 站) Vf @). (6.123) 
同样 , 在 RB" 上 的 可 微 阔 数 了 是 8, 办 一 凸 的 充分 必要 条 件 为 
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fe) >f A) T+ PO) vo) Ts (6.124) 
其 中 
POr =D (—1)@2'=Ah [A hke], (6.125) 
Vf (at) =h fh (#) | ences). (6.126) 
不 等 式 (6.124) 能 转 写成 比较 熟悉 的 通常 代数 运算 形式 , 得 
bf (0:3) > Pf (at) 
+o'( F(a") $ Aee) 2 la) tla) ). 
(6.127) 
4 Ale) =a nt, (h, 中 一 是 函数 的 这 种 子 类 的 性 质 已 由 Avriel、 
Zang?) 导出 , 他们 没有 利用 广义 的 代数 运算 ， 那 里 还 讨论 了 带 有 
这 类 函数 的 非 线 性 规划 的 某 些 方面 . 
还 可 以 定义 全 ,时 Th ASEH, 并 导出 包含 这 类 广义 
凸 性 的 非 线 性 规划 的 对 偶 竹 关系 ， 我 们 只 是 非常 简单 地 提 一 下 这 
个 论题 .一 个 在 R*" 上 的 h, p-n EA S ORRELA 
f*(€) =sup{ (E2) nL] (2)} (6.128) 
2 | | 
S'E =sup{P*h(O*h(a) —Sf@)T}, (6.129) 


HUE LRAWARR. ER, 中) 是 函数 的 值 域 可 以 包含 
oo, AME RU +00 上 函数 的 单调 性 必须 适当 地 解释 ， 
fil 6.2.4 


B TER, 
f (a) = 一 56 (6.130) 
& h(t) =t, A 
= —log(—«), a<0, 5 
$=] ate ae (6.131) 
TE S E O. SERRE, 
O O TOR WA > 6.132) 
+9, gx 
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f(x) = xer? 


图 6.5 (h, p-ERK f(x) ——xe"* 及 其 变换 而 得 的 凸 函 数 
在 及 上 是 同 的 ， 在 图 6.5 PUT em. ME, 有 


¢ 3 (a)=—6*, (6.133) 
H 
F*(€) =sup{—exp(—fa+of (#)) } (6.184) 
=sup{—exp(—fa+#— log 2)}. (6,135) 
因此 
网 ef —e, €<1, 
FE) “10 i>i. (6.136) 


有 趣 的 是 ,注意 产 实际 上 是 一 个 四 函数 ， 但 它 也 是 伟 , 内 -目的 ， 
ns | 
es i —1--log (1-2), <i, 
POE O-{ ome eh 
TG EES 6.6), WETIRE, f RRIS 是 ol f, t 
wheat. OY 
显然, 仅 当 检验 这 种 广义 凸 性 并 不 需要 巨大 的 工作 量 时 , 具体 
的 ( 内 - 凸 函 数 在 非 线性 规划 的 分 析 中 才 显 示 出 有 意义 的 应 用 . 
因而 , 间 题 成 为 如 何 能 找到 具有 所 需 性 质 的 函数 埃 和 只 使 得 能 够 
ERAT G, PEE. EA, 对 这 个 问题 , 只 有 部 分 答案 是 
可 用 的 。 在 其 些 特殊 情况 下 , 稍 作 努 力 就 能 找到 所 需要 的 函数 . 例 
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(6.137) 


-m ED m Pp mie a 


Pae- 1 - logit -日 pa 


66 h, H- ORRERI” 及 其 变换 而 得 的 凸 函 数 
如 , 我 们 已 有 属于 Avril 的 下 述 结 果 , CHU REELS] PRA, 
定理 6.16 


E SEER GRKOCR 上 ,为 二 次 连续 可 微 的 拟 凸 实 值 天 
数 . 如 果 存 在 一 实数 7", 成 立 

—z Vf (2)2 
Tep [z7 vÍ (w) 1? i 


§zi=1 
FEU TOF (ao) 40, ON f FE rk 也 就 是 说 ， 当 ACE) =t, Ala) = 
a Bt, FAC, })- eee. 
fi] 6.2.5 l 


H f (az) —log s, 它 定义 在 O- =f{e:cER, o>0} L, BRA 
Plea. 我 们 有 


I 1 
vi (s) = Vf (a) = — tay (6.139) 
根据 (6.1838) ,有 


roe EE oe 


因而 log e 是 1- Ag; 也 就 是 说 h(t) =t, bla) =e 时， 了 为 
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oto (6.138) 


(h, 中) ~ 75 RR. 
KOCR EHAK fl) = (z)*， 它 是 一 个 单调 的 递增 函数 ， 
在 *=0 处 有 一 拐点 . 这 里 , 我 们 得 到 , 42-0 时 ， 


sap man =sup TO 4-00, (6.141) 
因此 , 不 存在 实数 7", (Hw)? Era. e] 

给 定 一 个 函数 户 可 以 存在 许多 不 同 的 大 和 只 使 得 了 是 
(h,®)- TK. 我们 将 在 练习 内 , Rr DRA, 涉及 这 一 性 质 ， 
包 仿 本 节 引 入 的 一 类 广义 西 函 数 的 某 些 非 线性 规划 的 分 析 ， 将 在 
下 一 章 中 讨论 。 用 一 种 不 同 的 途径 , 对 于 可 变换 为 凸 落 数 的 某 些 
类 型 的 研究 能 在 Fenochel*" 中 找到 ， 

第 4 和 第 5 RPA AK RS RAE BS 
函数 上 去 . 同样 ,本 章 第 工 节 中 得 到 的 有 关 拟 凸 和 其 他 广义 凸 函 
数 的 结果 也 能 进一步 推广 到 “ 缴 式 ”- 拟 四 ,“ 缴 式 ”- 伪 同和 其 他 有 
关 函 数 类 上 去 .这 个 工作 留 给 读者 作为 练习 ， 

将 凸 规划 分 析 更 进一步 扩充 到 一 般 非 线 人 狂 规划 上 ， 特 别 在 对 
个性 和 Lagrange 理论 领域 方面 , 已 经 取得 成 果 . 这 些 结果 的 某 些 
方面 将 在 第 12 章 中 简短 地 提 到 ， 关 于 详细 的 讨论 , 读者 可 参看 
Arrow, Gould, Howe", Mangasarian'”s!, Rookafellar'*® 4% 和 
Roodec421. 


6.3 局 部 极 小 和 整体 极 小 


在 这 一 节 中 ， 我 们 介绍 一 种 防 数 ， 它 的 局 部 极 小 也 是 整体 极 
小 , 并 讨论 它 的 特征 . 建立 下 列 结果 所 用 的 主要 工具 是 点 到 和 集 映 
射 的 概念 . AX MY 分 别 为 RMR 中 的 两 个 集合 。 如 果 对 每 
一 元 素 IEX, 指定 一 子 集 卫 (w) CF 了 ,我 们 将 这 个 对 应 称 为 XH 
点 到 了 中 子 集 竟 点 到 集 映 射 。 点 到 集 映 射 在 数学 规划 理论 的 各 
个 分 支 中 都 要 用 到 . 这 里 将 不 作 研 究 ， 有 兴趣 的 读者 可 参看 
Hogan’ 和 Zangwill”, 关于 点 到 集 上 映射 的 拓扑 性 质 ， 可 参看 
Berger ， 
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在 图 6.7 中 有 一 个 点 到 集 映射 的 例子 , 其 中 下 CCR, 而 Po) 
Æ RETR. 


x3 
图 6.? 点 到 集 映 射 

下 询 重 要 概念 在 后 面 将 要 用 到 "”。 点 到 集 映 射 了 称 为 在 点 
SEX 处 是 下 半 和 连续 的 (ls0)， 如 果 对 每 个 yE F(z) 和 每 个 收敛 于 
“的 序列 CX, 存在 自然 数 K ARE y Hy}, EA 

YER (a), t= K, K+, =. (6.142) 

WR FENA CEI ABE PRN, MRE LEF 
FEER. ACTH ARERR FEX LREPEEAW, 因为 
EEO 处 不 是 下 半 连 续 的 . WRB CF @) 和 一 个 递增 的 
FRA {a}, CA ot 开始 递 增 地 收 伍 于 e, 则 不 存在 收敛 于 # Hy yE 
FO), AAN, BRE a2 Rot 处 有 是 下 半 连 续 的 . 

其 次 考虑 与 实 值 函 数 相 联 系 的 一 种 特殊 类 型 的 点 到 集 映射 . 

车 了 是 在 RB" 之 子 集 0 上 的 实 值 函 数 ,a 是 一 实数 ， 考 察 了 的 
KER 


xt x? 


Sf, a) —{e:e€0, fo) <a), (6.143) 
并 考察 集合 
G,={a:a€ R, S(f, a) #0}. (6.144) 
RE, SCS, 中 可 以 认为 是 Gy 中 的 点 到 局 的 子 集 之 点 到 集 映射 
j 8.3.1 
# C=R, X 
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faele). - i (6.145) 
于 是 ,Gy E RMA GME. 
例如 ,到 z=4, 于 是 cGy, H 
SF, A= {rse R, la! <2}, (6.148) 

下 半 连 续 性 的 前 述 定义 ,对 于 水 平 集 映射 来 说 , 可 特殊 地 叙述 
如 下 ; 

ADAG SCF, a) 称 为 在 点 aE€ G7 处 是 下 半 连 续 的 ， 如 果 
MH cE8( f, a) 和 任 一 收敛 于 4 的 序列 {oe} CG, FEAR 
BK Aa e 的 序列 {4 和}, 使 得 

ESG, ot), ¢=K, K+1, --, (6.147) 
如 果 SCF, À HE OCG ME PREAH, 则 称 它 在 Gy 上 上 是 下 
半 连 续 的 . 

我 们 也 可 利用 开 邻 域 来 定义 下 半 连 续 性 . 点 到 集 映射 SF, 
o) 称 为 在 点 wxEGy SbF BREEAM, MR FE THR ACR, 只 
要 满足 


ANS(f, a) *G, (6.148) 
便 存 在 一 个 开 邻 域 Nla), 使 得 对 每 个 AC N (a) NG, 都 有 
ANS (FS, D*+. (6.149) 


下 半 连 续 性 的 这 两 种 定义 在 以 下 的 定理 中 都 要 用 到 ， 

我 们 现在 能 令 述 和 证 明 关 于 函数 的 每 一 局 部 极 小 都 是 整体 极 
小 的 充分 必要 条 件 ， 这 谢 于 Zang、Avriel57 和 Zang, Choo, 
Avriela， 先 从 下 述 充 分 条 件 开始 . 

定理 6.17 

BS REECE 上 的 实 信函 数 ,a 一 f (2), zEC. WSF, a) 
在 a 处 是 下 半 连 续 的 . 如 果 是 了 的 局 部 极 小 值 点 ， 屠 末 它 也 必 
是 了 在 C 上 的 整体 极 小 值 点 

【证 明 】 如 果 假 设 条 件 成 立 ， 而 五 并 不 是 了 在 CO 上 的 整体 极 
小 值 点 .因此 就 存在 一 点 TEO, 使 得 

f@)<f@), (6.150) 

定义 序列 {a 为 
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E-A], 12-6151) 


显然 , 有 
lim {a} =f (£) =a, (6.152) 
BeeS(f, a), (6.150) (6.151) HE% 
f(z)<ael<flz), =i, 2, -, (6.153) 


EZES(f, of), i=1, 2, … AW}, | 
因为 假设 S(f, a) 在 5 处 是 下 半 连 续 的 , AATE BK M 
KAF TERN fo}, ERNIE, KHL, = AEST, a), 
因此 
fle) en, 1=K, K-+1, ~, (6.154) 
又 由 (6.150) 得 
fœ <f), i=K, K+1,*. (6.155) 
因为 {21}>z， 对 于 充分 小 的 8> 0， 存 在 自然 数 Ks, ECN 
Tu (2), i= Ky, Ko+1, <, 根据 地 为 局 部 极 小 信 点 的 假设 条 件 ,oz 
也 将 满足 


fF), t—Ks, Ketl, + (6.156) 
它 与 .155) 相 矛盾 . J 
推论 6.18 


设 f 是 在 OCR" 上 的 实 值 函数 .如 果 (f, 四 在 Gz. 上 是 下 
尘 连 续 的 ， 则 存 的 每 个 局 部 极 小 值 点 也 是 也 在 O 上 的 整体 极 小 值 
点 . 

现在 我 们 证 明定 理 6.17 KEA. 

定理 6.19 

设 f 是 在 CCR" 上 的 实 值 函 数 ,a€ Gy, 则 当下 列 任 一 假定 成 
立时 , S, a) 在 a Me FRM, 

(i ) 每 个 满足 fl) 一 a 的 EC, 都 是 f 在 C0 上 将 整体 极 小 
值 点 . 
(i) MES @) =a 的 任何 zE QO, 都 不 是 了 的 局 部 极 小 值 点 . 
【证 明 】 如 果 假 设 条 件 成 立 ， 而 S(f, a) 在 a 处 不 是 下 闪 

167 


连续 的 , 则 存在 一 个 开 集 4CC RE", 满足 


ANS(CF, a) #9, (6.157) 
且 对 于 每 个 5> 0, 都 存在 一 个 a(6) EN NG, 使 得 
ANS(f, «(8)) =9, (6.158) 
因此 , 我 们 能 找到 一 个 收 伍 于 ax 的 序列 {a CG, 使 得 
ANS(f, a) 一 从 i=l, 2, +, (6.159) 


由 此 可 知 对 所 有 纪 aca 否则 的 话 , 如 果 对 某 个 大 有 ata, 
WM SCF, ACS (Sf, ar)， 再 由 (6.157)， 我 们 得 到 与 (6.159) 相 矛 
盾 的 结果 了 由 此 可 知 ， 对 每 个 ZE 4ANS(f, 四 及 每 个 加 都 有 
TES(f, oa): 又 因为 {oa}->a, 我 们 得 到 f(z) a. 此 外 ,对 每 个 
cca, 有 

f(x) Pa=-f). (6.160) 

因为 4 是 一 个 开 集 ， 由 此 可 知 ，z 必定 是 了 之 局 部 极 小 值 点 ， 但 
显然 不 是 了 在 CO 上 的 散 体 极 小 信和 点。 这 个 结果 与 假设 条 件 矛 
a. J 

#it 6.20 

KfACCH 上 的 实 值 函数 ， 如 果 了 的 每 个 局 部 极 小 值 点 
都 是 了 在 C 上 的 整体 极 小 值 点 , 那 示 5S(F, 0 在 Gy 上 为 下 半 连 续 
的 . 

RT, 作为 推论 6.18 与 推论 6.20 的 直接 结果 , 我 们 得 到 下 列 
推论 . 

推论 6. 氏 

设 f 是 CCBR" 上 的 实 值 函 数 ，f 的 每 个 局 部 极 小 值 点 都 是 f 
在 CQ 上 的 整体 极 小 值 点 的 充分 必要 条 HOW. SCF, a) HE, EB 
下 半 连 续 的 . 

w 6.3.2 

现在 , 我 们 来 说 明 前 面 的 结果 .图 6.8 中 的 函数 在 4 处 有 一 
非 整体 的 局 部 极 小 , 而 在 wx" 处 有 一 整体 极 小 ， 又 注意 了 (8) =f E) 
=0, $ a=0, FPR {a}, 它 的 元 素 是 
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图 6.8 具有 非 整体 的 局 部 极 小 值 点 的 函数 


alm f(a), é=1, 2, +, (6.161) 


显然 , face, Hija, Ke Mee S(F, 0) 中 , 但 是 在 每 个 
EIH H, 如 果 对 充分 大 的 立 有 ER( 记 on 那 末 对 这 些 6 就 
DA a> 2, 于 是 , 这 样 的 序列 均 不 收 和 伍 于 琉 因此 SCF, a) 在 @ 处 
不 是 下 半 连 续 的 . ] 
在 有 的 情形 ， 验 证 某 些 函 数 的 水 平 集 映射 的 下 半 连 续 性 是 不 
太 困 难 的 。 这 样 就 可 保证 函数 具有 理想 的 性 质 ， 如 果 存 在 极 小 的 
话 , 它 只 有 整体 极 小 .对 于 上 节 讨 论 的 函数 类 , PHAM CH 
验证 . 
5j 6.3.3 
我 们 要 证 明 ， 如 果 f RELEMREAK OCR 上 的 实 值 
(a, A-A, H C MAH 6.92) AHH RAM, BA S(f,e) 
EG, 上 是 下 半 连 续 的 ， 取 asEGr， 并 取 任 一 收 伍 于 < 的 序列 
{a CG:、 只 要 考虑 满足 f(z) =a AES, DREBT, B 
为 如 果 f(2z)<iw 则 对 所 有 6 RRR ot =a, 序列 {fo} 便 是 满足 (6.147) 
的 ,如果 5 是 了 在 O 上 的 一 个 整体 极 小 值 点 , 那 末 一 定 有 
aza, t=—1, 2, -, (6.162) 
对 每 个 亏 仍 可 选取 z=z， 如 果 z 不 是 在 C 上 的 整体 极 小 值 点 ， 
那 末 存 在 一 点 3EC 使 得 
f(@)<f(#) =a, (6.163) 
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SE MPS {E"} 0 F, . 
ahr? [=a + (1-4 )oee) |, k=1, 2, =, (6.164) 
RR, F RMAF ae H {P} 我 们 不 妨 假定 ， 对 每 个 上 有 
|z] <1/k. | 
由 了 的 (六 办 一 同性 推 知 , 对 =1，2,… 有 


sa ~$|(Zo2)e((1-+)o2) | 


<($0-@ |i+i[a-Fewre@]. 6.165) 
由 (6.168) 和 (6.165), 我 们 得 到 
FB) fF) =a, (6.160) 
要 完成 这 个 证 明 ， 我 们 还 需 构造 一 个 序列 Uh CEAR 
SF, a) 的 下 半 连 续 性 所 要 求 之 性 质 ， 由 (6.166), 并 由 {a} 收敛 
F a, WMT HE Ks 使 得 
fD <a, t= Ky, Kit, o. _ (6.167) 
对 于 序列 Co} 中 每 个 6 一 区 ;++1，…, 令 wr 是 用 下 列 方法 定义 
的 。 EEG), 使 得 


EG) =sup{k :f (2) <o}, (6.168) 
这 里 假定 上 述 有 限 上 确 界 存在 ; BAS L(K) =1, B, 


EG) =k (@-1)+1, (6.169) 

此 外 , & 
a é=1, +, Ky, 
FO i= K; +i, e.. 
我 们 现在 证 明 {2 KAFE MEAE FERK 
K (A), 使 得 


(6.170) 


WEN, T), tK (A), KOJ +. (6.171) 
Saas, Eales (6.172) 
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f E : 1 x : 
püs 人 =, A<1, (6.178) 


1, ASI, 
Ty N aka (x) CN, (£), 又 
. f@™)<a, | (6.174) 
于 是 ,我 们 能 找到 KO), WEKA) >E: MK A)SA), He 
S@) <a, t=K (A), KO -LT =, (6.175) 
从 而 , 可 能 出 现下 列 精 这 之 一 ; 


1. HAE—P ISK A). 对 于 它 . FE) 由 (6.168) 得 到 这 时 
对 于 i>i, Hh (6.168), (6.169) 和 (16.175), 8 F(t) > (A) 和 
FOE Nat (T) CN sce (@) CN), (6.176) 
因此 
wvENT), t=%, t+1, +, (6.177) 
2. HWA i>KA), FER) {ak} 的 元 素 是 根据 (6.169) 和 
(6.170) 选取 的 .显然 , (>E), A JE MF £ WEIHE 
依次 取得 的 . 
因此 在 这 两 种 情况 下 , (oc!) 都 收敛 于 元 而 且 


atERS(F a), i=Ky, Ki+t, =. (6.178) 
& J 
6. A. REM ae: 对 任何 a, 集合 
Sf, a) = {rwE XCR, f(x) <a} (6.179) 


都 是 凸 的 . [提示 : 应 用 定理 4.2.) 把 它 与 定理 6,1 ee. 
6. B. 定义 在 ICHE LUMAR S RALPH BH, oR 既是 拟 凸 
UES, 证明, A f aay, WNP a ER, 
SC, a)= {arr E X, f(x) =a} (6.180) 
RENE., Ko, ER: RYDER, Sf, DRE, WAS 
是 连续 的 , 则 了 是 拟 单调 的 .以 线 性 分 式 函 数 y 说明 这 些 结果 ,9 定义 
ZEGRCCH 上 ,由 下 式 给 出 : 
ge) = Seto, (6,181) 


i7ti 


6.D. 
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其 中 分 母 永 不 为 党 . 


. 众所周知 ， 线 性 函数 在 一 凸 子 集 ECR ERE 了 的 顶点 处 达 


到 (如 果 极 值 存在 )， 推 广 这 个 结果 到 擅 线 性 函数 , 即 既 是 伪 凸 又 是 伪 
喧 的 函数 ， 上 一 练习 中 所 定义 的 线性 分 式 函 煞 , EDEA RERI? 
证 明 , 如 果 二 次 函数 

Raj bets r'Qz, zem, (6,182) 
FEMA ON, Nj oO, 


， Ca) 确定 下 列 矩 阵 的 王 定 性 、 次 正定 性 或 负 定 性 等 : 


112 O° Sis ad | 
Cor 12], it: 0 -1|, äi 
2 20 2Y -1 0 


e=[ 3 pa b=(0, —2)%, (6.184) 


pi = = 
叫 e 
D O m 
ne 


Jbg Eaa, f EAE A RTR RE 


- @) RZ= {vise RB, O<r<l}, fe) = —(#)?-2 EXEX E. ik 


FASE X LEFrRADOH., EARR BW OH 
W 现在 ， 设 Jo 一 一 (2)2?， 证 明子 在 同一 互 ETER. CA 
不 是 拟 丁 的 ? 


- (a) Ortega, Rheinboldt'! 定义 仿 凸 函 教 如 下 : AR XCR bw 


KERR S RAAB, 如 果 对 任意 的 ct EX, oe ,满足 
f@)>f@), (6.185) 
都 存在 正 数 a Me, tr 1(— Ra Ace BRM oa), 使 得 对 每 个 
clar 满足 
FCCL—-@) 21 + 829) ED) — ba, (6.186) 
TEES, 对 于 可 微 函 数 , 上 述 定义 等 价 于 本 章 所 给 出 的 定 尽 ， 
Ch) an ote? H (et) > fC’ BY (6.186) 都 成 立 ， 则 Ortega, 
Rheinboldt 称 了 为 严格 伪 凸 的 ， 另 一 方面 如 果 
al fo? A fT Sa) BR (227-21) yf (21) <0, (6.187) 
Ponstein®?7 定义 此 可 微 函 数 f BP, TERRE AT 
PSE Tres. UA ae Re 


fo=| 2 ant, (6.188) 


(@)*+1, s>0, 


6.H. 


6 M. 


1. 


JAZ Ortega-Rheinboldt MY FFE RAN. a a 

证 明 连 续 的 实 值 医 数 在 R LRP ROR. CHAT 
ACER I, HATE fo) =a 的 点 CER 的 集合 SCF, 
a), 它 或 者 被 包含 在 S(f ,oa) 的 边界 点 集合 中 ， 或 者 5 a)=Sf, 
a), 


证明: 如 果 了 是 R"” EHR, MACON RS 


整体 极 小 , 则 了 是 严格 氢 凸 的 ， 在 证 明 中 可 以 谱 用 前 面 练习 的 结果 ， 
， 通 过 推广 (4,119) 和 (4.1 和 4)， 导 出 关于 可 微 %, 乡 )- 凸 通 数 的 另外 的 
Br Rs ERM, s>r, KEG, |, Én PEER. 众所周知 
成 立 ” 
{5 aet < 过 ake 3 (6. 189) 
TERA: MN fH HM, 则 对 任意 s> 了 也 是 THR, WAX 
Ax 


tim {Sae f emar +, ba, (6.190) 
HEARSE r- BRB, 
- WEAR: 在 五 " LARERE ASE RA f HE CORTE Ss BO E 
79; SBR Q BY 


2) =V f(x) + rT EV), (6.191) 
对 每 个 ze 五 " 都 是 半 正 定 的 ， 
给 定 在 开 AK% 
fE = [ea— (+ (4— PP, (6.192) 


PBN Fb, 使 得 f Be, $)- OR, 
. 证 明 : 如 果 上 了 是 在 吾 " 的 凸 子 集 上 的 严格 拟 凸 函数 ， 则 SC , ORG, 
上 的 下 半 连 续 的 点 到 集 映射 . 
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第 了 章 
几 种 非 线 性 规划 问题 的 分 析 


在 结束 第 I 部 分 的 这 一 章 中 ， 我 们 选择 了 三 种 具有 代表 性 的 
PREM, 用 以 说 明 前 几 音 的 方法 和 结果 ， 这 些 规划 已 经 广泛 
地 由 许多 学 者 用 不 同 的 方法 进行 研究 和 分 析 .。 我 们 在 分 析 时 , 一 
般 将 遵循 那些 已 发 表 在 有 关 鞭 作 中 的 结果 , 至 少 在 用 语 上 是 如 此 ， 
BE, 在 多 数 情况 下 , 读者 能 够 根据 前 几 章 的 内 容 , 无 困难 地 证 明 
这 里 所 介绍 的 那些 结果 ， 

在 第 1 节 中 我 们 论述 二 次 规划 , 从 分 析 和 计算 的 观点 来 看 , E 
也 许 是 最 接近 线性 规划 的 一 类 非 线 性 规划 . 在 第 2 节 中 , 提出 了 
某 种 类 型 的 随机 规划 问题 , 将 它 列 入 的 理由 之 一 , 是 提醒 读者 注意 
存在 这 种 规划 的 表述 形式 , 这 点 对 三 类 规划 问题 均 相 同 ， 随机 规 
划 代 表 着 一 类 重要 的 非 线性 最 优化 问题 ， 许 多 专著 和 教科 书 中 都 
已 将 有 关内 容 写 入 .在 最 后 一 节 中 我 们 叙述 几何 规划 的 某 些 背 
R, 特别 是 导出 了 它 的 对 倡 规划 . 由 于 几何 规划 及 其 推广 在 实 
际 应 用 方面 有 着 明 显 的 巨大 潜力 ， 近 年 来 它 已 成 为 许多 著作 的 主 
题 ， 

TPR BY Fe, 因 本 书 的 篇 幅 限 制 ,不 能 更 广泛 地 讨论 这 三 种 类 型 
问题 和 某 些 应 子 列 入 的 其 他 问题 ， 我 们 只 能 建议 有 兴趣 的 读者 进 
一 步 参 看 更 专门 的 数学 规划 文献 ， 


71 二 次 规划 

考虑 非 线性 规划 
(PQP) min f(s) =a+owt+ Qn (7.1) 
受 限制 于 


Asb, (7.2) 
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这 里 aC RoC RB"、5E BR" 是 给 定 的 向 量 , Æ nxn MARE, 
和 是 wnxm 实 和 矩阵 ， 规 划 (PQP) 称 为 二 次 规划 为 简单 起 兄 , 假 
定 m<n, AHRI m. BR, 月 标 函 数 和 约束 函数 都 是 二 次 连续 
可 微 的 、 而 且 , 约束 函数 

gia)=(a)Ta—bh, =l, +, m (7.3) 
的 梯度 是 线性 匹 关 的 , 这 里 a! 是 4 的 第 5 列 、 因 此, 关于 最 优点 
必要 条 件 的 一 阶 和 二 阶 约束 品 性 在 每 一 能 行 点 均 成 立 ， 与 (PQP) 
相 联 系 的 Lagrange 式 为 


La, ») =attett a'Qa -$ Milao]. (7.4) 


现在 叙述 由 定理 3.8 和 定理 3.10 导出 的 最 优点 必要 条 件 . 
定理 了 .1 
设 是 问题 (PQP) 的 一 个 解 , 则 存在 一 个 向 量 入 € RB", 使 得 


c+Qa*— .AM*=0, (7.5) 
AC(a'7o'—b)=0, ¢=1, --, m, (7.8) 
和 >>0. (7.7) 
同时 , 设 2 AO 满足 
. zo =0, EIE), (7.8) 
其 中 
Ila) = {4:(al)7a" =b, i=l, +, m}, (7.9) 
风 必 有 
"Os 0, (7..10) 
转 到 充分 条 件 , 我 们 首先 定义 
fla") ={4:4E T(x"), XP >0}. (7.11) 
于 是 由 定理 838.11, 我 们 有 下 列 定 型 . 
定理 了 7.2 


设 ww’ 对 问题 CPQP) 是 能 行 的 . 如 果 存 在 向 量 入 满足 (7.5) 
至 (7.7), 且 对 满足 下 列 各 式 的 3 对 0. 
Fa=0, Efla", (7.12) 
Fa, EIl), iE 7 (2"), (7.18) 
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必 有 
MrQz>0， (7.14) 
那么 必 是 (PQP) 的 一 个 严格 局 部 极 小 值 点 ， 
因为 目标 函数 是 二 次 可 微 的 , 而 且 约 束 是 线性 的 ,规划 (PQP) 
的 凸 的 性 质 完全 能 由 矩阵 Q 刻 划 . 
在 第 4 章 和 第 6 章 ,我 们 叙述 过 使 为 凸 、 伪 凸 和 拟 凸 的 关于 
@ 的 条 件 , 我 们 只 考虑 最 简单 的 情况 . 在 这 一 节 的 其 余部 分 , BE 
Q 是 正定 的 .由 此 可 知 , 是 严格 凸 的 ， 并 且 ， 出 现在 前 面 两 个 定 
理 中 关于 Qe 的 所 有 二 阶 条 件 必定 满足 这样， 一 阶 条 件 (7.5) 
至 (7.7) 是 必要 且 充 分 的 . 
我 们 还 能 氢 述 一 些 对 偶 性 结果 . 首先 , 我 们 引出 对 应 于 (PQP) 
RRL. 仿照 第 5 章 的 推导 , 我们 拒 (PQP) 变 痪 为 具有 扰动 
的 “无 约束 "规划 


a A F(x), i A’a—b>w, 
aii w)=4 too, 其 他 . (T.15) 
REER, wER” 9 KACPER M FRA h: 
pE, A) = sp{E eH wpe, w)} (7.16) 


= sup | Get Nw eo 二 Qe l, (7.17) 


ATE-t ow 


且 可 得 
ore pee ee i, A>0, 
l +o, ams 其 他 ， 
(T.18) 


(7.18) P FER MARAS EAR EE OR, 我 们 得 到 


L 7 “3 A i A a 这 后 
sE, i e)TQ(E+AA—c)—b7A—a@, AZO, 
Tos 其 他 ， 
(7.19) 
(PQP) 的 对 侦 规 划 成 为 
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(DQP) max oÇ, n) =a- Qn +e (7.20) 


受 限 制 于 
A\—14 =e, (7.21) 
a0, (7.22) 
xP, (DQP) 也 是 一 个 二 次 规划 . 注意 , AMBER 只 是 为 了 
记 法 上 的 方便 . 
让 我 们 考察 这 对 对 偶 二 次 规划 的 某 些 性 质 ， 原 有 的 扰动 函数 
由 下 式 给 出 : 


D(w) —inf{ f(a): ATs- bw}, (7.23) 
这 里 将 空 集 的 下 确 界 理解 为 十 oo 以 及 
有 (0) =inf { f(a): A™:—b>0}, (7.24) 


因此 ,车 (PQP) 存 在 一 个 能 行 点 %, 划 甸 (0) 过 十 co, 而且 (PQP) 通 
常 是 稳定 的 ， 对 (DQP) 也 能 作 类 似 的 分 析 。 (DAP) 的 能 行 集 决 
BEER, BAUME AHO, 我 们 总 能 找到 满足 (7 .21) 的 nm，。 然 
m, (DQRP) 的 最 优 信 为 无 界 的 情形 则 可 能 发 生 ， 为 了 看 到 这 一 点 ， 
取 一 个 %<m 的 nxm 答 阵 4， 比 如 和 = [一 4，1]， 向 量 58=(1, 
1)", HQ=1,c=e~0, 则 由 对 候 目 标 函 数 求 极 大 : 

max— "(0, A) ~max{ 2 一 去 (4X 一 0)"Q” (AA—c) +a } 


(7 .25) 
选择 = 和 二 者 同时 趋 于 +00, 我 们 得 到 —G°(O, 和 ~> 十 oo、 显 
然 ，(PQP) 没 有 能 行 解 且 多 (0)~> 十 oo; 这 就 是 说 (PQP) 是 不 稳定 
的 .从 5.2 节 结 果 我 们 得 到 下 列 定理 ， 
定理 7.8 
对 (PQP) 的 任何 能 行 解 = 和 (DQP) 的 任何 能 行 解 A, n), R 
们 有 
f(a) Pola, n). (7 .26) 
规划 (PQP) 是 稳定 药 且 有 一 个 最 优 解 x* 的 充 要 条 件 为 ; 
(DQP) 是 稳定 的 且 有 一 个 最 优 解 O, 0°). MEH, AAPM MA 
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有 最 优 解 , 则 
fe) =o, n). (7.27) 
RRR, Cottle, Dennis™ Ay Dorn? 1410 等 首先 建立 
ST SAR PEE, REER op FS BS 
$. 这 些 早期 结果 的 重要 性 , 主要 在 于 它们 对 于 对 价 性 理论 中 更 
新 、 更 一 般 的 结果 的 发 展 有 着 促进 作用 . | 
如 同 我 们 在 5.3 节 所 见 ,最 优 性 条 件 紧密 地 联系 着 Lagrange 
A ”对 于 这 里 的 规划 , 我 们 有 下 列 定理 . 
定理 了 .4& 
如 果 工 是 由 (7.4) 给 出 的 Lagrange sh, (2*, 入 ) 是 工 关 于 一 
Wc Mi ASO 的 一 个 鞍点 ， 那 末 史 是 (PQP) 的 一 个 最 优 解 , "是 
(DQP) 的 一 个 最 优 解 。 HETRE 
f(a") = Lla", 1") =a", n°), (T.28) 
QE n 满足 (7.24)， RZ, MRPOYRREHBARILF c*, 
那 末 存在 一 个 类 , l, A) LPR. 对偶 地 , ACDQP) 
是 稳定 的 且 ?是 一 最 优 解 , 则 存在 一 个 2* Ba", A) ED Bt 
鞍点 . 
二 次 规划 问题 在 实 焉 中 常常 发 生 , CRAR REBAR, 
或 者 作为 求解 更 一 般 非 线 性 规划 中 的 一 个 子 问 题 ， 关 于 它们 的 
E, 已 经 提出 了 许多 数值 解法 ， 其 中 之 一 在 第 13 童 讨论 。 有 兴趣 
的 读者 也 可 以 查阅 Boot, Dantzig" 的 书 或 Beale™, Cottle’, 
Cottle, Mylander™”, Keller“ 的 文章 和 那里 引用 的 参考 文 
mR. 


了 . 安 。 带 有 可 分 离 偿 付 退 数 的 随机 线性 规划 


下 而 将 习 馈 形式 的 线性 规划 作为 一 个 活动 分 析 模 型 来 考虑 , 
我 们 涉及 的 商品 以 二 …， mAs, 活动 以 1,…, n 为 标号 B 
设 ay 表示 在 活动 了 中 用 去 (qw>>0 时 ) 或 生产 (ay<0 BY) PAT T 2 H 
数量 ， 并 设 2; 是 活动 了 的 单位 收益 . 那 末 ， 当 每 个 活动 掌握 在 水 
€ s; 时 , 数量 


182 


T> Qiy (7 .29) 
将 表示 用 去 的 (pp>>0) 或 生产 的 (%<0) 商品 和 的 全 部 数量 .供应 
RRR RH b= (bi, o, bm)? 表示 , 规定 了 656 之后， 就 得 到 -一 个 
活动 分 析 模 型 的 普通 线性 规划 , 可 写 为 : 


max Po) 一 mV (7.30) 

PR wl T 
| Aa=b, (7.8L) 
ax0, (7.82) 


在 随机 线性 规划 中 5 被 认为 是 一 个 随机 变量 , 因此 , 提 法 及 其 分 析 
等 新 间 题 就 随 之 产生 。 这 里 我 们 将 论述 偿付 型 的 表述 形式 , 它们 
的 详细 内 容 能 够 在 Walkup, Wets'”, Wets 以 及 Williams” 
中 找到 ， 我 们 的 分 析 基本 上 按照 &vriel、Wiliams 的 处 理 , LI 
| 共 包 e 函 数理 论 为 基础 . 

我 们 假定 , 必须 作出 一 种 决策 ,也 就 是 说 ,首先 选择 z， 这 一 
步 引出 了 某 个 y 和 收益 prs， 下 一 步 ,5 的 实际 数值 显现 了 ， 要 采 
取 某 个 校正 措施 去 消除 y 和 显现 值 5 之 间 的 差异 .假设 我 们 已 给 
出 一 个 依赖 于 向 量 3 一 y 的 可 分 离 的 偿付 函数 9， 它 使 得 


96-9) =} gy). (7.83) 
这 个 偿付 西数 当 g>0 时 指明 了 附加 支出 , 当 g<0 时 指明 了 收入 ， 


于 是 , 具有 可 分 离 仅 付 的 随机 线性 规划 在 于 选择 第 一 步 的 z, 使 整 
体 期 望 收 益 达 到 最 大 . 形式 地 , 我 们 得 到 


(PRP) max pro— $ Elg(.—w)I, (7.84) 


其 中 名 是 随机 变量 如 的 数学 期 望 运 算 , y ACT. 2. WE 

Yo BE Bighi y)] ARK. 我 们 对 问题 (PRP) 的 分 析 将 包 

括 它 的 存在 性 、 特性 和 对 侦 性 定理 .假设 g: 是 y 的 正常 点 函数， 

我 们 唤 要 在 非 负 象限 上 求 一 个 正常 四 因数 的 极 大 . 因为 规划 

(ERE) 珊 过 明显 的 符号 改变 可 变 为 . -个 凸 规划 ， 所 以 能 把 第 4 Be 

和 第 5 章 的 结果 运用 于 我 们 的 分 析 。 然 而 , 在 此 之 前 , 我 们 先 推导 
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此 个 更 一 般 的 结果 . 

考虑 凹 非 线 性 规划 
(CP) max (2) =u(a#)—2(Az), (7.35) 
其 中 eR, w RR 上 的 闲 的 正常 止 责 数 , A 是 nxn KER, 2 
Æ R” DARE GAM. 为 了 计算 47 .35) 的 对 假 规划 ， 我 们 
”和 先 引 入 一 个 扰动 向 量 we RR”, a 


(a, w) 二 WO) ~de w), (7.36) 
TA ARAE A y": 
WE, A) =inf E+ Nw YC 40)} (7.87) 
=inf {é7a+4?w—u(ae)+2(Ae—w)}, (7.88) 
作 代 换 
w= Ag—y, (T.39) 
我 们 得 到 
WG, Ninf Ea yi As us) aly)} (T.40) 
一 inf {(€+A?A)*a2— ula) } —sup thy —2(y) } (7.41) 
Al 
PCE, A) = (EHAA) zA). (7.42) 
HE, (7.35) RHR ALR H FR ih: 
(CD) min{—"(0, AJ} =" (A) —u" (ATA). (7.43) 


与 这 些 规 划 祖 联系 , 可 以 定义 另 一 个 问题 ( 它 不 是 一 个 最 优化 
问题 ): 


(CG) 找 一 个 2E€ BR 和 入 ER 使 
ATE ula), (7.44) 
ADE O(a}, (7.45) 


其 中 Bu Cw) A G2" (A) SP BDA w A” HE & WEALD REACHES. 
这 二 个 问题 用 下 面 一 些 定理 彼此 联系 起 来 cm. 
定理 ?.6 l 
为 使 向 量 z* 和 入 满足 


ula") —2z( Ag") = max{u(ec) —2( Az)} (T.46) 
= min {z (A) —u"(ATA)} 


az (A) u (ATA), (7.47) 
其 充分 必要 条 件 是 ww* AA 满足 
ATI Bula"), AE asl). (7.48) 


这 个 定理 的 证 明 由 与 第 5 章 类 似 的 论证 导出 . 

对 于 前 面 三 个 问题 , 我们 有 一 个 存在 性 定理 ， 

定理 Y.6 

HBL TE A" 的 有 效 区 域内 分 别 存 在 向 量 z 入, BE (CP) A 
(CD) ZA WBE BE AY, WW (CP), CD) 和 (CO) 必 定 有 解 ， 

下 面 ,给 出 一 个 刻 划 特性 的 定理 . 

定理 .7 

假设 (CP) 是 正规 的 .一 对 向 量 (z*，X") 是 (CC) 的 解 的 充 玫 条 
件 为 ，w* 在 (OP) 中 为 最 优 以 及 X* 在 (CD) 中 为 最 优 . 

最 后 , RNRMREN A 人 

定理 了 .8 

规划 (CP) 是 稳定 的 且 有 一 个 最 优 解 的 充 要 条 件 为 : 规划 (CD) 
是 稳定 的 且 有 一 个 最 优 解 ， 在 这 个 情况 下 , 由 在 (CP) 的 极 大 值 等 
于 y ECOD KRME. 

在 特殊 情况 A~I (SR) FROM Ate Fenchel!” 
首先 研究 , WA Rockafellar?” HE Fain. 


WF BY Sp oS yw A 2 
ula) =È uay), (7.49) 
aly) = z(u), (7.50) 


ARMARE 2 WA OE), 因此 我 们 有 一 对 可 分 离 
的 对 偶 规 划 


(PSP) max > ty (a) -> uC AD)) (7 .51 ) 
和 
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(DSP) =A $ 2 (Xe) — > ul ((ATA),). (7.52) 


现在 转 到 带 可 分 离 偿付 的 随机 规划 ， 注 意 到 它 是 如 同 (7.,51) 
给 出 的 一 个 可 分 离 规划 ， 令 
Piir a0, 


wm) =f le eg, See (7.68) 
aly) = Elgi y], @=1, =, m, (7.54) 

我 们 得 到 
Mai Cm 0) 
zs CA) = sup {A — Elgi- y)]}. (7.56) 

于 是 , 对 偶 偿 付 规划 成 为 

(DRP) min $ supfiy— Egli —y)]} (7.57) 

受 限制 于 
Ap, (7.58) 


注意 , 由 假定 知 BDC( 思 [gy]) 一 RR， 即 整个 实 轴 . 
让 我 们 稍为 细致 地 分 析 一 下 对 偶 目 标 函 数 (7.57)，、 其 中 关于 
的 上 确 界 能 确切 地 计算 的 充 要 条 件 为 
MEEL iy). (7.59) 
因为 其 中 的 函数 的 定义 域 是 BR， 这 个 条 件 等 价 于 条 件 
DtE[g(h—ys D] >N>D Eg my 1)], (7.60) 
可 以 证 明 
DE g- ya = ~ ED g(t my 1)], (7.61) 
DElg(t—-ys 1) = —E[D giy 1)], (7 .62) 
因此 ,(7.60) 能 写 为 
EED gilti — y; IN ~ ELD gla —yt)]. (7.63) 
由 于 这 些 g EER Oe, 一 4 REMAX, Bik, — Dtg 
Ya 1) 和 一 Dg 一 IHF ty AE, WERF y: AR 
W. 4 y->+oo(M—co) ay, EATR RRE BY, 并 且 可 能 
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KERN. RE 
H, {e Digi y 1)}— dim {Dg ysi) } =Y; 
| G=1,+++, m, (7.64) 
lim {— D gai y 1)} = jim os Dg ti~ Ys a 4, 


i ¿=1, =- , m, (7.605) 
FAR Ea ya A, 有 
y> Dogi- 1) > Digli ya led, bml, +, m, 
(7.66) 
目 对 任何 成 立 
y — ELD gilts 1) > — BL D* g(t Ys L)] 2&8, i=, 0, m 
(7.67) 
FÆ, (7.63) f FF E A ae 
y> N> 8, (7.68) 
并 对 6 一 1,…, mA 
-{ &, RARE y A= — ELD giya 1), 
vo MAMET y A n= ELD gti ya 1)]. 
(7.69) 
我 们 现在 能 够 叙述 带 可 分 离 偿付 的 随机 线性 规划 的 基本 的 存 
在 性 定理 ， 
定理 了 .9 1 
MLB (PRP) ARE. 著 存 在 一 个 和 满足 (7.58)、(7.68) 
和 {7?.69), 且 (DRP) 是 稳定 的 , 则 (PRBP) 有 一 个 最 优 解 . 
我 们 还 有 一 个 刻 划 (PRP) 的 特性 的 定理 ， 
定理 7.10 
假设 (PRP) 是 稳定 的 . 非 负 向 量 e" 是 (PRP) 的 最 优 解 的 充 
BAA, FERDA 满足 
ATM SP, (7.70) 
yen ed (7.71) 
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N=] Ôi 仅 当 对 某 个 % 有 È = ~~ EĻ D+ gC — yy 1)] > 
i Yo KAHRA p A yi ED gya 1], 

— BL D-9,(t,—( Aa"), 1)] Sal — ELDt gt (Ar) 1)], 
i=], att, Mha (7.78) 


(7.72) 


而 且 
>0 (7.74) 
仅仅 出 现在 下 式 成 立 的 时 候 ， 
Saul =p, (7.75) 


要 求 读者 证 明 (7.70) 至 (7.75) 是 问题 (00) 的 条 件 CPA 
竺 的 随机 规划 来 表达 的 ), 问题 (CO) 在 (7,44) 和 《7 .45) 中 给 出 . 

最 后 , 我 们 令 述 强 对 偶 性 定理 . 

”定理 7.11 

规划 (PRP) 有 一 最 优 解 w* 的 充 要 条 件 为 : 规划 (DRP) 有 一 个 
最 优 解 入 , 且 在 这 个 情形 下 ， 

Bat — Bigli (As*),)] = 3} sup {Afm Elg au). 

l (7.76) 

我 们 来 更 精确 地 规定 偿付 函数 o. 对 这 些 偿付 函数 ， 可 以 有 
许多 不 同 的 假设 。 但 我 们 将 只 提 最 简单 的 偿付 形式 , 即 线性 偿付 
的 情况 , 这 时 ,对 5 一 1，…, m, 

WW), YW, 


er aan FOTN Web, 

这 里 ， 向 量 y= C91, oo, Ym), B= (81, 01, Om)” 以 及 ye 8 ER 

EM. Wiliams ™ 证 明了 , 带 有 组 性 偿付 的 随机 线性 规划 由 下 式 

(PLRP) max orz 一 rdz 一 中 Co 5,) i F,(t)at | 8,8 aI, 
2>0 i=1 一 = 

(7.78) 


(7.77) 


HP, F eS 
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F(t)=prob{) <t} (7.79) 
的 边缘 分 布 . 
要 求 读者 导出 对 应 于 (PLRP) 的 对 侦 规 划 为 


(DLRP) min S uadh- (YC— 8) [全 E(t)at | +8.B(b) 


(7.80) 

受 限 制 于 
yor i>, ej (7.81) 
ATAP, (7.82) 


RE A MRT F 的 含义 见 下 而 ) 
Cy Pt (Gi) +81 — FE CG) a Fy PT (Gd) 48 A Fr G. 


(7.83) 
由 于 五 可 以 是 不 连续 的 , 对 于 给 定 的 一 个 数 r, 方程 

Fily) =r (7.84) 

即使 0<t<1 也 可 能 无 解 ， 根据 这 个 理由 , 我 们 引入 记号 
P+ (0) -mf F(y), (7.85) 
F-(G) =sup Fy), (7.86) 

ni sm 

EUG) >> Fr A) (7.87) 


HFST BEAM 入 

带 有 可 分 离 偿付 的 随机 规划 的 对 侦 性 定理 在 这 些 问题 的 数值 
解法 中 是 有 用 的 ， 因 为 它们 对 近似 的 线性 规划 的 最 优 解 提供 了 某 
种 界限 ,并 指出 近似 解 与 真实 最 优 信和 的 偏差 . 至 于 详 节 ,读者 可 参 
考 Williams’, 那里 讨论 了 线性 偿付 的 情况 ， Ziemba®” 以 不 同 
的 处 理 提 出 了 这 种 问题 的 解法 . 对 随机 规划 的 一 般 领 域 有 兴趣 的 
BA, WW Sengupta’, Vajda” 的 书 中 找到 说 明科 料 ， 也 可 
以 在 文献 里 的 许多 评论 中 找到 这 种 材料 . 


7.3 几何 规划 


在 非 线性 规划 中 , 从 分 析 和 计算 的 观点 出 发 ,最 广泛 地 被 研究 
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的 一 个 分 支 是 几何 规划 和 它 的 推广 ， 对 这 类 非 线性 规划 的 巨大 兴 
趣 有 两 个 方面 ;一 方面 ， 为 非 线性 规划 导 得 的 几乎 每 一 个 分 析 结 
果 和 计算 方法 都 可 以 用 几何 规划 问题 很 好 地 加 以 阐明 ; 另 …… 方 面 ， 
来 身 不 同学 科 的 实际 最 优化 问题 都 能 表述 成 几何 规 划 或 它 的 推 
广 。 在 这 里 我 们 介绍 几何 规划 的 某 些 分 析 情 况 , 它们 说 明了 前 几 
章 中 得 到 的 理论 结果 对 这 类 非 线 性 规划 有 兴趣 的 读者 , 可 以 在 
文献 中 找到 涉及 斤 何 规划 的 大 基 论 文 ， 作为 这 个 论题 的 引导 , E 
## Duffin, Peterson, Zener WBS 以 及 Zener HB, BFR 
广泛 的 论述 , BA Avriel, Rijckaert, Wilde, 那里 还 介绍 了 较 近 
的 结果 . - 

为 了 研究 几何 规划 ,我 们 从 定义 正 项 式 g AF. 它 是 如 下 有 限 
项 之 和 组 成 的 实 函数 : 


9 (%) = Te), (7.88) 


这 里 o>0 Alay CR LAE MB, Bo 0, ARAN, ENR 
非 西 的 ， 也 非 四 的， 然而 我 们 即将 看 到 ， 它 们 是 Qog，log)- 凸 函 
%. 
BRE) 一 logt,， h*(y) =e 和 中 (i) 一 1ogt， 我 们 得 到 
9 u) =dgh(y) =log Fe oxp Sas, (7.89) 
现在 由 定理 6.15， 当 且 仅 当 pg 是 凸 函 数 时 ， 实 函数 9 A A, 
多 -此 函数 ， 我 们 将 利用 下 述 著名 的 Holder FER 来 证 明 
(7 .89) 中 函数 的 凸 性 , Ba>0, B>0 RER, 且 设 p>0、 r>0 
使 得 (分 -+ (r) t=, 则 
Sau FD) CBN)" (7.90) 
313 7.12 
设 9 是 定义 在 如 的 正 象限 上 的 一 个 正 项 式 , 则 由 (7.89) 给 出 
的 8(gy) 是 RY Ei wR. 
[证明 】 WER, CR 是 任意 两 个 点 ,并 且 令 
* 译注 : WA AG) — Cog tir erg log En), RIU) = (en Om), 
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+ 1% #4 n 1s È 
A == { c exp pa Bish | > Bima exp 2 uF I : (7.91) 
- j= = 


(p)*= 44, (r) 1= gg, (T.92) 
IRA (7.90), 得 到 


He, exp 2 ayir | Cinxp > anit” 
<(3 onxp > awa ) (Flos oxp > anit)" (7 .93) 
两 边 取 对 数 便 导出 
log © cexp > ay (9195 + F205) 
<9, log 2 Coxp p> Gy; + Jo 10g = Cs exp $ ayy, (1.94) 


从 而 ,3 是 是 函数 . J 
MAE BAST EA ce ML IL AA, OP AB SRA ESR ER BL 
何 规 划 : 


(PGP) min go (a) (T.95) 
受 限 制 十 
ploai, k=l, =, m, (7.96) 
s0, (7.97) 
这 里 go 91, °°, Om 是 正 项 式 . 于 是 , 可 设 
gee) = D oT ass” (7.98) 
其 中 
了 一 人 (7.99) 
To=], (7.100) 
Tu=% t+], k=l, =, m, (7 101) 
sn= . (7 .102) 


内 此 (FGP) 由 多 个 正 变 数 揭 一 个 目标 函数 和 各 个 正 项 式 约束 组 
成 .第 个 止 硕 式 是 &% 一 ?4 十 1 个 称 为 单项 式 的 项 之 和 ， 在 这 规 
划 中 单项 式 的 总 数 是 M. 
因为 限定 为 正 , 我 们 能 作 变 最 代 换 
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t=", j=l, =, ñ, (7.103) 
FEHR go, 91, s gm 的 对 数 ( 不 改变 极 值 点 位 置 的 单调 变换 ), 得 到 
一 个 凸 规划 , 它 服 从 第 生 章 和 第 5 EO 提出 的 分 析 。 TED TILA 
规划 时 , 纵然 这 种 途径 为 大 多 数 作者 所 使 用 , 但 我 们 这 里 采取 直接 
的 (和 等 价 的) 途径 ,把 (PGP) 看 作 (log，log)- 凸 规划 , 从 而 在 用 于 
Ser ABS HEY AT Le fg AS 6 章 的 某 些 结果 . 
在 介绍 我 们 的 结果 之 前 ， e E 内) 一 本 
规划 的 相应 推广 . 
需 回忆 的 重要 讲 实 是 ， 利 用 前 面 一 章 所 定义 的 推广 的 代数 运 
算 和 某 些 容易 的 修正 ， 所 有 凸 对 偶 性 的 结果 也 能 应 用 于 更 一 般 的 
情形 . 
一 个 标准 欧 (h, 内 - 凸 规划 给 出 为 全 
(BHP) i min f(c) (7.104) 
受 限制 于 ` 
glay i=l, +, m, (7.105) 
Hep f Hg t, gr 分 别 是 RY 上 的 正常 (h, fb) RK ALE HE 
(h, ob) TR, A 
à “一 由 (0). | (7.106) 
E Ls (Ch, 四) 一 出 函数 称 为 是 正常 的 ， 如果 ED Cf) 46 Ext 
fy cE R A f(a) > —oo,y, 其 中 
ED(f) = {eve R", f(a) <+}, (7 107) 
4-004 = lim mb *(y), 一 coy 一 lim bY). (7.108) 
i (T. 108) oh R DTT EJEM. pilin, F b(t) = log £, W 
二 cogs= lim g"= +œ, —ocy= Lim 对 一 (0. (7.109) 


i Yo 
MEJIA (SHP) 中 向 量 w= (w, +, 2) 形式 的 扰动 ， 使 
f(a, w) Fil gle, waal a, v), p- RA CA, o), $)-H 
Be. WEL, vlw), eo wiw) EBRR A me 
vr (ta), on Ur Ca), ERS BBE OS R), 9 (u)) 和 
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ee mee eee Rm cee a eget pb Bagby Se a me o, 


dg (h-*(y), ot (u)) A hI. AW 6.86), 
我 们 定义 
f(a, w), (2, w) EED(f), g(a, w) >, 
O(s, w) = | G=1, =, m, 
Too¢ 其 他 ， 
(7.1190) 
于 是 可 知 , 通过 适当 选择 包 参 与 有 关 函 数 的 方式 , (SHP) 能 等 价 于 
D(a, On) KF e RB, 

RATA BB), SEG BE ES a 
ERS —, RAE 6 章 中 对 ( 内 )- 凸 函数 作 了 进 一 
步 的 推广 ， 回 想起 当 了 是 人 %， 中)~ 同 函数 时 ， 在 (6.128) 中 给 出 的 
定义 是 

f(E)=sup{ (7), [If @)}. (7.114) 
容易 证 朋 , f° 也 是 (h, 办 -是 函数 , Hf ol f, 此 处 闭 包 运算 涉及 
废 的 上 图 象 ， 我 们 能 对 一 个 给 定 的 疡 FE IRR Pee mH, 
设 一 个 广义 的 内 积 为 


(ay) v.w =p EOE) O), (7.112) 
这 里 及 和 及 不 必 是 相同 的 均值 函数 ， 车 及 二 太 二 及 我 们 得 到 
(y) AY ht, g 一 (ay) A os (7.118) 


这 里 右边 曾 在 (6.113) 中 定义 ， 推 广 (6.128) 和 (6.129), 能 把 一 个 
Ch, pJ- F BSE MERE BIE I 
f° © ~sap{ (ETa) no- IF @} (7.114) 
或 
FE -sup AEM) -efh (7.145) 
这 里 再 次 指出 , hA DA 
还 可 以 证 明 , 由 (7.11 人 定义 的 "是 (天 p) rR 并 且 
F(a) =p la Ehf. (T.1168) 
于 是 ,对 应 于 (SHP) 的 一 对 原 有 -对 个 规 划 是 
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(Pr) min (2, 0) (7.117) 
和 


(Dee) maxf 一 ]9 (Or, A)=n(A), (7.118) 
RE FeO ese ee, FARM: 
O” (€, A) =sup{((o") aa, ob +] (Aw) 5, 0,4) [-]6 (2, wY}, 
(7.119) 
并 且 ， 
[-]°="f—d(@")). (7.120) 


注意 47.1L8) 中 函数 了 是 大 的 (2 p) uR t. 
我 们 先 用 例题 说 明 一 个 较为 简单 的 情况 ,然后 回 到 几何 规划 , 
那里 要 利用 上 述 一 般 的 一 对 对 偶 规 划 . 


i 7.3.1 
考虑 问题 
min f(x) — (2)Y3 (7.121) 
受 限 制 于 
g(a) = (a) "ol, (7.122) 


这 里 ce 五 HER, f Rix LRM BR, ETRE le:cER, o>}, 
最 优 解 屁 然 是 2* 一 1 A flo" )—1, 然而 ,容易 证 明 , MBA ER, 
& AG) t M EEL, RBS — PRE o, $)- FAR, 
min (a 1/5 (T 123) 
FREF 
(0. (7.124) 
ER Oy) = ytd) 8 FO,=1, o= too, E (7.122) 中 引 
入 扰动 变量 及 v(t) =t, 我 们 得 到 
(oY (gw) Ym0,, 
SE I +004, 其 他 . 
TH, 我们 取 A(t) h(t) =t 来 计算 90". 


(7.125) 
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P(E, A) =sup{((Ea)a,aL+] Gan) a4) (18, w)} (7.126) 
=sup{p [és+ dw — 66 (a, w)]} (7.127) 
ecw Bano, SL+ AW BTA, (7.128) 


引入 一 个 松弛 变量 eS 0,, 得 出 


(at — uw) E= (7.129) 
w= (s) (pw). (7.130) 
因此 ， 
[ sup {s+ Ne) YN tt}, (A419 1/705, 
g" (é, A) =, 7 
sec, 其 他 
(7.131) 
fix) 


nià) 
HK 
(NN 
1 2 3 4 A 
(2) 对 个 规划 


WIL 一 对 Wh, 9)- 凸 规划 


OVE er sel 过 
-lis A+2j ，(AT1) SS0 MEEL, 

Tog, 其 他 . 
(7.132) 


而 且 , ik é=0, 对 偶 规 划 为 
max [—]6"(,, 4) =n(N) = A-a. P? (T.1883) 


受 限制 于 
(M+1) > (7.184) 

它 的 最 优 解 是 入 =2 Aon (")=1, RA AURA Ze 7.1 
中 说 明 ， 1 

注意 ， 这 个 例题 中 得 到 的 对 偶 规 划 仅仅 是 利用 种 种 扰动 所 能 
导出 的 许多 可 能 的 对 偶 规 划 中 的 一 个 ， 虽 然 本 例 问题 也 是 一 个 几 
HAU ( 闭 我 们 还 限制 % 是 正 的 )， 我 们 却 没 有 把 它 作 为 Ag, 
log)~ 凸 规划 来 处 理 . 因此 可 以 看 出 , 与 一 个 确定 的 原 有 规划 联系 
的 一 族 对 偶 规 划 能 够 进一步 扩大 ， 其 办 法 是 找 出 不 同 的 函数 玉 和 
h, 使 一 对 原 有 -对偶 规划 变 为 (4, 由 )- 凸 规划 . 

现在 ， 我 们 来 为 几何 规划 求 出 一 个 对 得 规 划 ,: 相同 于 原来 由 
Duffin, Peterson, Zener 所 推导 的 对 偶 规 划 ， 我 们 不 采用 算术 - 
几何 平均 值 不 等 式 "" BE RSS BT TE Ch, 内) 一 西 对 
(ATE. 

我 们 通过 改写 (PGP) Bp, Sy Beek Hype, 它 
的 分 量 是 y, Ei, 满足 


wm Tle), Te, er eee (7.135) 
satis (log, e ik, A 
= (On) BB (ant), (7.136) 
于 是 得 到 
gely”) =R evo b=—0, ---, m, W137) 
规划 (PGDP) 成 为 


(SGP) min go (y*) (7.188) 
受 限 制 于 
L= lge) Ong, k=l, e, m, (7,139) 
这 里 go FE Clog, log)- 凸 函数 , [一 jg t [一 jgm JE (log, 1og)- H 
函数 ,% 满足 (7 .136), H 
Og = (0) °=1. (7.140) 
引入 扰动 向 量 &= (w, oo, UT 和 c= (es, +, Wm), AE 
uw EE, Rew, EL, 我 们 得 到 一 个 扰动 问题 . 


min go(y’) sap Cw (7.141) 
受 限 制 于 
[— lgr(y”, wx) 一 [一 ] (2) cael +] ee) > Ong, k=1, =, m 
(7.142) 
YOU = (mOn) O (lant), tE I, k=, ++, m 
(7.143) 


注意 , 96 A Cog, log)-hm ee, LEPA log 对 应 于 向 量 y, gu 
分 别 关于 y", we)? ECA, ,出 - 回 函数 ， 且 有 Ay) 一 10g y 和 
v(m) =w, BH yOu 在 此 处 意味 着 Yi 因为 我 们 选择 了 
hy (uy) = log 4, 
这 样 , 原 有 规划 (SGP) 能 重 写 为 
(Po) min O(%, y, Og, 0), (7.144) 
其 中 ， 
[—]on(y*, w) >On, k=l, +, m, 
Pl, y, u w)=oo(y"), Hf oN” 
(7.145) 
这 里 第 二 个 条 件 具 是 (7 .148) 的 简略 记 法 . E (7.145) 并 不 成 立 ， 
NI D(a, Yy, u, w) 一 十 coug， 
转 到 对 侦 规 划 之 前 ， 我 们 计算 一 个 后 面 要 用 到 的 共 斩 函 数 ， 
设 9 是 Y 的 一 个 (六 p-m, 其 中 Aly) = (log wm, +, logy)’, 
P(t) =logt, 假设 9 由 下 式 给 出 ; 
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I = Tews (7.146) 
这 里 a>0, AAE =E, 并 定义 
FÈ spinul TAD 
RE, 4A) =y MRIMEMICS A=, M A R. 
要 求 读 者 证 明 : 
N i 
M(H), Beas, £20, 
+ Oozs 其 他 .. 
并 且 , o BA, &)- RR hd SHA. 
现在 计算 9 WSR eR. 定义 
OCE, n, 8, A) 
= up t (£72) 1, wg, og [十 (ny) 1, oe, tog [十 ] (8724) r, 10g, tos 
[十 ] (Te), ngl — 18 (e, y, u, w)} (7.149) 
= sup { (E70) r 06, og L+ ] (FY) r tog. tog 


SR 
[十 ] (8%) 7, we oel H] CA 20) 2, gl- 12 cys}, (7.150) 
引入 松弛 变量 fn Oi, 我 们 得 到 
F(E, n, 8, A) 
= Sup {CETT r, 10g, mgl H] (7Y) 1, 10g, 10g 


g" (§) -| (7.148) 


as 
[+] (u)r we, ng 0] 3} bf] (Bean) 
E=] (Mw) 1, 106, oe —] D ey) (7.151) 
poet (ETa) r, 10g, tog L+] (7Y) r, 10g, tog L + ] (8722) z, 108, 108 
=] IÄN] gen) azo 
a Sets, 


(7.152) 
考虑 和 之 0 的 情况 ， 我 们 能 写成 
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BCE, n, 8, A) 
= Pup {ET log, wl—] (8? yOu), log, Iog 
veu=40e 
[+] ((n+8)"y) 2 wn toe] mI ea) IE can} 
(7.153) 
am sup{ (ga) T, log, og L— ] (TAOL) 7, log, 10g} 
[+Isupi((7+5)" ‘Y) 4, gwela] 2 Aslea pà Citi) 
[一 j 他 cys} (7.154) 


=S.-+18s, (7 158) 
《7 .155) 中 第 一 项 是 
8.—sap{oxp] ( 6-3) and.) logan +++( éd lin «log a I} 
(7.156) 
mini, 显然 地 
si Sa =é,, j=l, =, a, 
Hong ”其 他 . 


对 于 第 二 项 , 重新 整理 后 我 们 得 到 
NA = ENP, EECH +8?) Ty Oyy log, lg 上 一 一 ] > Cy} 


[+] sap {CC +51) Tyt) r, 10g, og L~ 1L] Siew) 3 [+] ny 
[+] sup {(G"-+8")"Y") nue, meL] mE] D co) 


(7 157) 


(7.158) 
然后 由 (7 .146) 至 (7.148) 以 及 某 些 修改 , 我 们 有 
yy (2 7) +46, rr" La] H( es om 
Ss = [+10 (2 ED aes > (utad =i k= 1, we 
+ jog, 其 他 ， 
(7 159) 
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最 后 , 有 
so oy- o(a ney (7. 160) 


Ly CA 
此 处 , 假设 
ô= 0, (7.161) 
elo 
St 5a, 8, 20, E em, (7.163) 
K=0 ted, 
D6; = Ar, &—1, cee, M (了 .164) 
te . 
在 其 他 情况 ,多 (0, 0, 5, 4) 三 十 oo，(Po) 的 对 侦 规 划 由 下 式 给 出 . 
(De) nax [—]6é* 0, 0, ð, A) = max L’(8, A, 7.165) 
OS BY 
an 1 
(DGP) max °(6, M =I (全 Ui tes s) Can) (T .166) 
ZR F C7161) ~ (7.164). BÆ, x Eeh Duffin, Peterson 


Al Zener™ 及 许多 其 他 o ROR R. wae, TAT 
A(t) =t Fl p(t) = logt Æ (A, $) eR. 

这 个 对 侦 规 划 有 许多 有 趣 的 特性 . 最 重要 的 也 许 是 ， 虽 然 原 
有 问题 具有 非 强 性 目标 函数 和 非 线 性 约束 ， 然 而 约束 (7.161) 至 
(7.164) 是 唉 性 的 、 按 这 个 观点 , 几何 规划 属于 这 样 一 类 非 线 性 规 
划 ， 即 其 对 侦 规 划 具 有 线性 约束 ， 这 样 重要 的 一 类 问题 已 由 
Rockafellar%4 研究 过 ， 这 种 规划 的 重要 性 在 于 , 线性 约束 的 非 线 
性 规划 通常 比 非 线性 约束 的 规划 更 易于 求解 .然而 , 在 儿 何 规 划 情 
形 , 假如 想 通 过 求解 对 侦 规 划 而 得 到 原 有 规划 的 最 优 解 ,上述 闭 种 
好 处 并 非 是 显 见 的 、 当 最 优 的 对 偶 解 已 知 时 , 去 计算 最 优 的 原 有 
变量 并 不 总 是 方便 的 ,特别 , 当 某 些 原 有 约束 在 所 寻求 的 最 优点 并 
非 积极 约束 时 更 是 如 此 ， 但 是 , 至 少 出 现 一 个 有 趣 的 情况 , 在 这 情 
况 中 求解 对 偶 规 划 显 然 较 为 容易 ， 当 大 有 几何 规划 中 单项 式 的 总 
aM 恰好 比 原 有 变量 2 S71 时, 对偶 约 束 由 非 久 变量 的 正方 形 线 
性 方程 组 构成 ， 而 当 这 方 种 组 线性 元 关 时 它 可 以 有 唯一 和 解 ， 我 们 
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用 一 个 例子 来 说 明 这 一 情况 ， 


§ 7.8.2 
LR SL eT BR RY 
; _ (a)? 3a)? 
min go(2) m Ga) (aa)? ee 
FREF <>0 和 
_ (%2) (oa) 3 9 (za) 13 
g2) acme i (11)? (aq) ®/*( ag) MECCA 


(7.168) 
如 前 所 述 计算 对 偶 规 划 , 我 们 得 到 


maxzy (ð, à) 一 D) =) ae) GE y" M)” 


(7.169) 
受 限 制 于 

人 1 十 Ga =i, 
—43,+23, $5 =0, 
a 

= 61— 252+ da— 7 Ost es =O, . (7.170) 
Ôa 一 64- 5;=0, 
23, 0 
2 ld 

6 4- 86, 二 85 = Ny, (7.171) 

d=0, {7.172) 


这 个 正方 形 的 线性 方程 组 (7.170) 有 唯一 解 


* 1 © + * * 
b= > a= 4, ĝa = 2, 6,=1, 6;=1, 


因此 各 =4. 代入 (7.169), 我 们 得 到 并 8 0°) =884, Y 

ES, 在 这 个 例题 中 , 对 于 对 侦 规划 , 我 们 得 到 了 唯一 的 能 行 
解 ,因而 也 是 最 优 解 , 因 为 在 不 有 规划 中 我 们 有 M=5 和 ww 一 4. È 
M>on+1, 对 侦 规 划 通 常 存在 无 数 能 行 解 ,为 了 寻找 最 优 解 , 它 的 
目标 省 数 还 必须 求 极 大 ,在 任何 情 沈 , 最 优 原 有 解 必须 从 最 优 对 偶 
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RHA. ER RSA Ae RE SF AE 
定理 中 找到 .结论 将 不 加 证 明 地 给 出 ,因为 这 里 出 现在 一 对 原 有 - 
对 偶 规 划 中 的 函数 是 可 变换 为 凸 的 ,车 我 们 利用 这 个 事实 , 则 有 关 
结论 便 是 第 5 章 的 一 般 凸 对 偶 性 理论 的 特殊 情况 ， 等 价 地 ， 可 把 
第 5 章 的 结果 推广 到 带 有 A, 四 )- 出 函数 的 非 线 性 规划 . 

定理 了 .18 (GARE) 

a oi (PGP) MAR, ZO, 入 满足 (DGP) HAR, 

glær, A). (7.173) 

定理 了 .14 ( 强 对 偶 性 定理 ) 

如 果 (PGP) 是 强 相 容 的 , 又 e EPGP) 的 一 个 最 优 解 , 那 末 ， 

(i) 规划 (DGP) 是 相 容 的 , 并 存在 -- 个 能 行 向 量 6, A), 使 


Go (a*) =I (8*, 2"), (7 174) 
(ii) 存在 一 个 a0, WE a, A) 是 下 列 Lagrange 式 
对 一 切 %>0 和 xz0 HRA: 


L(w, ND =go(@)[-1 $ del+Tge(2), (7.175) 
G) BRERA CO", A) 满足 


(a) 
s: -l au gola") ‘Eh, 


2 (7.176) 
Me fI, tly, k=l, =, m, 
=] 


(iv) 车 (8, A") E (DAP) KR IR, MUZE MO 的 条 件 下 ， 
T (8", 2), dET, 
Pis l (7 177) 
re 4E Ik, F=1, +, m, 
注意 , 在 (7 .175) 的 方 括号 中 的 代数 运算 对 应 于 $E) =logt. 

希望 证 明 这 个 定理 的 读者 可 以 从 定理 5.16( 或 它 的 等 价 结果 ) 
出 发 ， 痢 里 断定 强 稻 容 性 包含 稳定 性 ， 一 旦 稳定 性 建立 了 ， 就 可 
由 第 5 章 并 通过 计算 次 梯度 得 出 结论 的 其 余部 分 ， 最 后 两 个 定理 
Hjh Duffin, Peterson, Zenor™” 证 明 , 在 那里 还 可 找到 其 他 对 


B01 


ô; Il (ay) = | 
fed 


BERR. 


练 y 


7. A. 给 定 一 个 实 向 量 9 E Rp xp ERE M, Fie SORA TFIIA fE 


a SS 
w MQ yy 


aF ost 
Fey 
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HK Jig} et we FD 2, 
w=gtM,, w>, 220, (7.178) 
2 也 二 0, (7.179) 
这 个 问题 被 Cottle 和 Dantzigr] 称 为 互补 性 基本 问题 . 试 证 明 , 对 非 
负 变 最 x 之 0 求解 由 人 .了 和 (7. 久 给 出 的 本 三 次 规划 问题 ， 等 价 十 求 
解 土 面 介 绍 的 一 -个 名 应 的 五 补 性 问题 . 
[提示 : 定义 
u=e+Qa—Ad, v=ATs—b, (7.180)] 


- RCT 20) E (7.22) 6 HRR COOP ATR ALE] 
- 试 证 (7.70) 至 (7.75) 是 带 可 分 离 偿付 的 随机 线性 规划 问题 4CC) 的 条 


件 . 


- 试 证 CPPRP) 的 对 偶 规 划 (CDLRP) 的 确 由 (7.80) 至 (7.83) 给 出 . 
.对 于 带 有 线性 偿付 消 数 (7.?77) 的 随机 规划 ,构成 其 存在 性 、 特性 及 对 


偶 性 定理 , 


. 设 了 是 正 项 式 ,证明 1/9 dog, log)- M žr. 

. WEBAC7.148), 并 证 明 9%” Ch, P), 

， 验 证 关系 (7.156) 至 {7.166). 

， 从 最 优 对 偶 解 来 计算 2， 继 续 分 析 例 ?7.3.23. 验证 在 这 种 情况 下 


(7.174) RA, 


， 指 出 第 5 竟 和 第 6 SEH pee Fe E714 的 证 明 是 必需 的 ， 
. 假设 有 下 列 线性 的 极 小 被 大 规划 
CPM) min {max (3 CyB a,)t (7.181) 
受 限 制 于 
Saye) >dy, k=l, m, (7.182) 
TRIES RF CPM BAE 
(DM) max $ dn, Pa ba (7.183) 
=i k=l ` 
受 限制 于 
Saai (7.184) 
i 


7. L 


T.M. 


2. 


Fayn -È Cais j=l, srry Th, (7.185) 
kal crs 


n=0, AO, . (7.186) 
， 考 虑 代数 规划 "2 
min G(x) (7.187) 
受 限制 于 
GCT EI, Kel, m, (7.188) 


这 里 ， 对 于 k=0, T; e Pe, 
Ge) = fo D P + Ria) mY, (7.189) 
tery bed, 


Erh Pi, 是 zx>0 MET, an Br Pis Te w BIEN. 找 出 
它 的 一 个 对 偶 规 划 . 

车 让 上 题 中 rs 一 二 cc, 得 到 

GT) = € By iw, gy mal (P(e) )%, CB, Cx) Pr} 区) te, (7.180) 
SEXP aE ETE RH A? 构成 并 求解 一 个 代数 规划 的 
AAS, Apa Ge 由 (? .190) 给 出 , 求解 时 ， nH] 7.3.2 那样 ， 
利用 它 的 对 偶 ， 喝 一 般 的 包含 广义 正 多 项 式 的 代数 规划 已 由 Avriel 
和 和 Gurovicht 和 Gurovich"8! 4p 
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